記得幾年前看過一部電影,威爾(er)史(shi)密斯主(zhu)演的《國家公敵》,影片中美國的各個角(jiao)落充斥著(zhu)攝(she)(she)像(xiang)(xiang)機(ji),CIA可以(yi)隨時調用這些(xie)攝(she)(she)像(xiang)(xiang)機(ji)進行追蹤,無(wu)數的攝(she)(she)像(xiang)(xiang)機(ji)形(xing)成(cheng)了一張超級大網,當時覺得有點科幻也(ye)有點背寒。
短短幾(ji)年后這已經(jing)成(cheng)(cheng)為了現實(shi),成(cheng)(cheng)百(bai)萬(wan)的(de)(de)攝像頭已經(jing)聯(lian)網(wang)(wang),給我們的(de)(de)人(ren)財安全、交通出行帶來了非(fei)常多便利,但(dan)這僅(jin)(jin)僅(jin)(jin)是開始(shi),實(shi)際上(shang),現在的(de)(de)技(ji)術已經(jing)能夠很輕松地(di)進行智能識別(bie)、人(ren)流(liu)計數甚至(zhi)行為識別(bie)等,這龐大(da)的(de)(de)視(shi)頻(pin)數據分析比傳統(tong)互聯(lian)網(wang)(wang)數據更接近于真(zhen)實(shi)的(de)(de)世界(jie)。這個(ge)潘多拉盒(he)子的(de)(de)里面,究(jiu)竟會帶來什么?
視頻監控將是世界上最大的數據生成器
2012年這個世(shi)界上增加了2.8ZB的數(shu)據(ju)(ju),相當(dang)于(yu)30億(yi)TB。如果視頻數(shu)據(ju)(ju)也存儲下來(lai),這個數(shu)據(ju)(ju)就要翻倍(bei)了。
以國(guo)內某(mou)省為例,公共視頻監控(kong)已經(jing)超(chao)過100多(duo)萬(wan)個(ge)攝像(xiang)頭(tou),總(zong)保有(you)量(liang)近400萬(wan),以此估計,全國(guo)攝像(xiang)頭(tou)數(shu)量(liang)不少于4000萬(wan),某(mou)投行(xing)的(de)報告稱行(xing)業每年(nian)還在(zai)以20%加速增(zeng)長(chang),行(xing)業龍頭(tou)海康威視12年(nian)的(de)年(nian)報披露的(de)銷售量(liang)就達570萬(wan)套(含前后端),增(zeng)長(chang)37%。而另一個(ge)數(shu)據也(ye)很驚人,英國(guo)的(de)攝像(xiang)頭(tou)數(shu)量(liang)與(yu)人口數(shu)量(liang)之比已經(jing)達到1:15。粗略(lve)計世界至少有(you)1億個(ge)攝像(xiang)頭(tou)在(zai)角落(luo)靜靜的(de)看著。
如(ru)果這(zhe)些(xie)數據(ju)存儲下來,將是超級大數據(ju)。假設(she)所有(you)攝像頭換為(wei)1080P,每(mei)(mei)天的數據(ju)量是64G,每(mei)(mei)年(nian)的數據(ju)量是23T,全世界每(mei)(mei)年(nian)將產生(sheng)23億(yi)T的視頻數據(ju)。
這(zhe)是個(ge)可怕的數(shu)字(zi)。不(bu)知是有幸(xing)還是不(bu)幸(xing),絕大(da)部分視(shi)頻監控數(shu)據存儲(chu)(chu)不(bu)會(hui)超過(guo)一天。但這(zhe)是因為從目前(qian)看來,與存儲(chu)(chu)的價(jia)格(ge)相比,這(zhe)些數(shu)據不(bu)值錢(qian)。
正在形成的超級視頻監控云
視頻監控已經不(bu)再是以前那樣,幾(ji)個攝(she)像頭(tou)連(lian)到大樓保(bao)安(an)室,只有(you)進入這個神秘的房間才能(neng)一窺(kui)究竟。實際上,監控攝(she)像頭(tou)已經成(cheng)為(wei)(wei)了智能(neng)終端(duan),有(you)網口、能(neng)控制甚至可接雙向音(yin)頻,攝(she)像頭(tou)的互(hu)聯已經成(cheng)為(wei)(wei)趨(qu)勢(shi)。
例如公(gong)共(gong)視(shi)頻,已經從一(yi)(yi)個(ge)(ge)城(cheng)市(shi)內的(de)互(hu)聯(lian)(lian),發展到一(yi)(yi)個(ge)(ge)省的(de)互(hu)聯(lian)(lian),逐步(bu)到一(yi)(yi)個(ge)(ge)國家的(de)互(hu)聯(lian)(lian),無論是新的(de)網絡攝像頭,還(huan)是舊模擬攝像頭+DVS/DVR,都(dou)開(kai)始加速(su)接入一(yi)(yi)個(ge)(ge)龐大的(de)云(yun)平臺,從單(dan)純(chun)的(de)視(shi)頻流媒體數據到云(yun)臺操作,每(mei)一(yi)(yi)個(ge)(ge)終(zhong)(zhong)端(duan)都(dou)成(cheng)為了一(yi)(yi)個(ge)(ge)可被遠程(cheng)控(kong)制的(de)智能化終(zhong)(zhong)端(duan)。而另一(yi)(yi)端(duan),這些數據又(you)被包裝成(cheng)各種公(gong)共(gong)應(ying)用向公(gong)眾開(kai)放,看看媒體里充(chong)斥著(zhu)多(duo)少手(shou)機可實時查(cha)看城(cheng)市(shi)道(dao)路交通視(shi)頻的(de)新聞。
除了公(gong)共視(shi)頻,無數(shu)私(si)有視(shi)頻也在(zai)形成私(si)有云,分支龐大的(de)連(lian)鎖(suo)超市(shi)、連(lian)鎖(suo)酒店、物流公(gong)司、金融機構甚至工業生(sheng)產(chan)線,無數(shu)端點的(de)數(shu)據正在(zai)向云匯(hui)集。而不少國家也要(yao)求私(si)有視(shi)頻數(shu)據也要(yao)定向開(kai)放,可被調用和(he)操作。
這(zhe)正是(shi)與互(hu)聯網(wang)(wang)不(bu)同的(de)物聯云網(wang)(wang)絡,從感知到互(hu)聯到應用,只不(bu)過這(zhe)個(ge)感知是(shi)用無(wu)數的(de)“眼睛(jing)”看(kan)世界。
歡迎進入“楚門的(de)世界”。
視頻大數據的價值還未發掘
一般看來(lai),視頻的冗余(yu)數(shu)(shu)據(ju)太(tai)多(duo),只有發生了突發事(shi)件(jian)才會回看記錄,所(suo)以(yi)大部分視頻數(shu)(shu)據(ju)的存(cun)(cun)儲很短,超過一周(zhou)的少(shao)之(zhi)又少(shao)。而(er)另一方面,由(you)于數(shu)(shu)據(ju)讀寫(xie)要求(qiu)高,云端存(cun)(cun)儲極(ji)為昂貴(幾千(qian)元1TB),所(suo)以(yi)絕大部分數(shu)(shu)據(ju)都是(shi)存(cun)(cun)在前端。
視頻(pin)智能(neng)分析的(de)初衷(zhong)就是要解(jie)決(jue)冗余(yu)數據的(de)問(wen)題,把人從枯燥的(de)監控(kong)中解(jie)放(fang)出(chu)來(lai),幫助(zhu)人更(geng)好的(de)眼觀六路(lu)。所謂智能(neng)的(de)核心就是目標(biao)識別(bie)和行為分析,按照應用的(de)要求設定規則,當視頻(pin)中的(de)信息符(fu)合規則時(shi)才進行告(gao)警(jing)和記錄,常見(jian)的(de)應用包括入侵檢測(ce)、周界告(gao)警(jing)、車輛識別(bie)、交通違法監控(kong)等。
目前行業主流的(de)(de)智(zhi)能分析廠商,如國外的(de)(de)ObjectVideo、ioimage、Emza,國內的(de)(de)卓揚科技、文(wen)安科技、智(zhi)安邦科技等,基本都是(shi)圍繞(rao)“監控(kong)”二字,屬于視頻數據的(de)(de)初級加(jia)工(gong)(gong),一(yi)般只是(shi)對單個攝像頭的(de)(de)視頻信息(xi)進行實(shi)時處理,按(an)一(yi)定規則(ze)產生事(shi)(shi)件(jian)數據(如告警事(shi)(shi)件(jian)、車輛計數),跨空(kong)間(jian)和時間(jian)范(fan)圍的(de)(de)二次加(jia)工(gong)(gong)分析還比較少,因(yin)此,視頻監控(kong)領(ling)域并未真正的(de)(de)形成(cheng)互聯網(wang)意義上(shang)的(de)(de)大數據。
不(bu)過(guo)視頻監控(kong)數(shu)據(ju)必定能成(cheng)為下一(yi)個大數(shu)據(ju)的(de)(de)寶庫(ku)。一(yi)方(fang)面,它(ta)具備了(le)(le)典型的(de)(de)大數(shu)據(ju)4V特征,數(shu)據(ju)量巨大、多樣化(hua)、表面上無(wu)序(xu)、但(dan)暗(an)含(han)著無(wu)數(shu)人(ren)和物(wu)的(de)(de)行為。另一(yi)方(fang)面,它(ta)是(shi)真(zhen)實世(shi)界(jie)的(de)(de)寫照,這與(yu)互(hu)聯網獲得的(de)(de)大數(shu)據(ju)有很(hen)大不(bu)同,真(zhen)實世(shi)界(jie)蘊含(han)了(le)(le)無(wu)數(shu)難以用格式化(hua)文字表達(da)的(de)(de)信息,比(bi)如人(ren)通(tong)過(guo)視覺可以快速(su)形成(cheng)判斷(duan),一(yi)個地(di)方(fang)是(shi)繁榮還是(shi)衰退,氣氛(fen)是(shi)緊張還是(shi)歡快。
當然,前提是,存(cun)儲成本能(neng)降下來,數據處(chu)理(li)能(neng)力能(neng)升上去。
監控數據的應用潛力巨大
比如對(dui)于一個商(shang)場,除了對(dui)安防的(de)(de)需求(qiu)之外,對(dui)視頻數(shu)據(ju)的(de)(de)二次挖(wa)掘,可以搜集顧客(ke)的(de)(de)性別(bie)、年齡、穿著信(xin)息,可以統(tong)計(ji)顧客(ke)的(de)(de)購物(wu)路徑、停留模式(shi)、聚集熱點,甚(shen)至(zhi)可以二次或者多(duo)(duo)次回頭率、到店周期(qi)等。這類似于網站訪問分(fen)析,能(neng)為商(shang)場的(de)(de)優化提供(gong)基(ji)礎數(shu)據(ju)。如果是(shi)連(lian)鎖型企業(ye),還(huan)能(neng)結合(he)多(duo)(duo)店的(de)(de)數(shu)據(ju),獲(huo)得區域性甚(shen)至(zhi)全國性的(de)(de)數(shu)據(ju)。
同(tong)樣放大(da)到一個城市(shi),每(mei)個街道(dao)的(de)(de)(de)人流(liu)數(shu)據、車(che)流(liu)數(shu)據都在其(qi)中(zhong),這些數(shu)據整體匯集起來,就是一個城市(shi)的(de)(de)(de)人車(che)分布圖(tu),靜態的(de)(de)(de)如不(bu)同(tong)區域(yu)人的(de)(de)(de)特征、車(che)的(de)(de)(de)特征,動(dong)態的(de)(de)(de)如人車(che)的(de)(de)(de)路(lu)徑、停(ting)留模(mo)式,這對城市(shi)的(de)(de)(de)規劃和管理都極有價值(zhi)。
如(ru)果再(zai)結合到時間線,從無數攝像頭(tou)收集(ji)到的(de)(de)(de)(de)信(xin)息,還(huan)(huan)可以看出一(yi)個國家、一(yi)個區域、一(yi)個城(cheng)市的(de)(de)(de)(de)變(bian)(bian)化,如(ru)同(tong)《大(da)數據》里所言,甚至可以預測趨(qu)勢(shi),比如(ru)是(shi)否更(geng)多(duo)的(de)(de)(de)(de)店鋪在新裝修(xiu)開張(zhang)(zhang)還(huan)(huan)是(shi)更(geng)多(duo)的(de)(de)(de)(de)歇業,是(shi)更(geng)多(duo)的(de)(de)(de)(de)飯店還(huan)(huan)是(shi)更(geng)多(duo)的(de)(de)(de)(de)服裝店等,這些變(bian)(bian)化匯集(ji)起來(lai)我們可以看到人(ren)口的(de)(de)(de)(de)變(bian)(bian)化、經濟的(de)(de)(de)(de)趨(qu)勢(shi)、潮流(liu)的(de)(de)(de)(de)趨(qu)勢(shi)、自然環境的(de)(de)(de)(de)變(bian)(bian)化甚至人(ren)的(de)(de)(de)(de)快(kuai)樂和緊張(zhang)(zhang)程(cheng)度。
這不是(shi)天(tian)方(fang)夜譚,現在的(de)技(ji)術已經(jing)完全做到。一方(fang)面高清攝像機的(de)普及,視頻(pin)信息質量更加(jia)優(you)良;另(ling)一方(fang)面,智能分(fen)析的(de)水平已經(jing)相當的(de)高,對物品的(de)識(shi)別和分(fen)離、對顏色(se)文字數字的(de)識(shi)別、對物體變化的(de)分(fen)析甚至還有(you)暴(bao)力行為的(de)監測。
但要(yao)(yao)實(shi)現這(zhe)種意(yi)義上的(de)(de)(de)數(shu)據(ju)挖掘,需要(yao)(yao)進行大(da)量(liang)(liang)元(yuan)數(shu)據(ju)的(de)(de)(de)記(ji)錄,甚至是與監控目的(de)(de)(de)無關的(de)(de)(de)元(yuan)數(shu)據(ju),要(yao)(yao)多維度的(de)(de)(de)進行分析,需要(yao)(yao)海量(liang)(liang)的(de)(de)(de)數(shu)據(ju)匯集存儲(chu)和(he)超大(da)規(gui)模的(de)(de)(de)數(shu)據(ju)處理,最后還需要(yao)(yao)基(ji)于位(wei)置和(he)時(shi)間的(de)(de)(de)進行關聯(lian)性分析整合(he),這(zhe)巨大(da)的(de)(de)(de)資源和(he)成本耗費是打(da)開(kai)大(da)數(shu)據(ju)之門的(de)(de)(de)障(zhang)礙(ai)。
技術和人性的沖突
一(yi)周前(qian)Google宣布,在有效的(de)隱私(si)保護機制完善之前(qian),禁止Glass APP使用智能(neng)識(shi)別(bie)功能(neng)。此前(qian),Google 因為(wei) Glass的(de)隱私(si)政策曾(ceng)經遭受過國會議員的(de)質詢,其(qi)中包括了面部識(shi)別(bie)是否(fou)(fou)會侵犯用戶隱私(si)、GoogleGlass 是否(fou)(fou)會收集用戶信(xin)息、Google 如何保障用戶數據等(deng)方面的(de)問題(ti)。
視頻監控也一樣涉(she)及隱私問題。視頻技術中智(zhi)能(neng)識別的(de)(de)(de)技術也已經相當(dang)成(cheng)熟,如(ru)果(guo)存儲夠(gou)大(da)、處理夠(gou)強,在無數(shu)的(de)(de)(de)云數(shu)據中進(jin)行(xing)搜(sou)索同(tong)樣可以(yi)產生(sheng)非常多有意義的(de)(de)(de)應用(yong),比(bi)如(ru)搜(sou)索走失的(de)(de)(de)小孩(hai),未來只需要輸入照片,就能(neng)大(da)范圍的(de)(de)(de)進(jin)行(xing)智(zhi)能(neng)搜(sou)索,這比(bi)靠(kao)人海戰(zhan)術有效的(de)(de)(de)多。
但(dan)是這對隱私的(de)(de)侵犯是難以(yi)(yi)繞開(kai)的(de)(de)痛,國內在這方面(mian)的(de)(de)法規還是空(kong)白,例如之前微博爆出的(de)(de)“摸奶門(men)”就是典型的(de)(de)公民隱私被侵犯的(de)(de)事件(jian)。在監管上亟待(dai)明確誰可以(yi)(yi)建攝(she)像頭、哪里可以(yi)(yi)建、數據怎樣保(bao)存、怎樣保(bao)障信息不外漏。
不過在(zai)(zai)現實(shi)中,攝像頭的(de)迅(xun)猛增長已經昭示,公(gong)民隱私還是讓位于公(gong)共管理,但(dan)是隨著(zhu)視頻(pin)監控云(yun)的(de)形成(cheng)和(he)走(zou)向(xiang)云(yun)存(cun)儲,數(shu)據的(de)威力越來(lai)越大,通過云(yun)數(shu)據,甚(shen)至可以描繪出一個人(ren)的(de)生活軌跡、興趣愛(ai)好(hao),TA喜歡(huan)去哪(na)些店鋪,在(zai)(zai)哪(na)里活動,服飾愛(ai)好(hao)如(ru)何(he),經常跟誰在(zai)(zai)一塊(kuai)兒(er)原本只有上(shang)帝能看到的(de),云(yun)都在(zai)(zai)看著(zhu)你。
技術的(de)(de)(de)(de)進步總會(hui)帶(dai)來(lai)新的(de)(de)(de)(de)挑戰,未(wei)來(lai)睿智的(de)(de)(de)(de)人們必定會(hui)想出隱私(si)的(de)(de)(de)(de)保護(hu)方(fang)法(fa),只有你的(de)(de)(de)(de)授(shou)權才能查看你在視頻里的(de)(de)(de)(de)存在,或(huo)者,我們的(de)(de)(de)(de)三(san)觀進化了,適應了技術的(de)(de)(de)(de)發(fa)展。
世界(jie)本(ben)來就是(shi)舞臺,上帝正在云(yun)端(duan)微笑。
編(bian)者注:本文原(yuan)題《視頻監控背后的(de)大(da)數據,在超級(ji)潛力跟(gen)道(dao)德禁制之(zhi)間怎么選?》,原(yuan)載虎嗅(//www.huxiu.com/article/15427/1.html),正(zheng)文無(wu)刪節。