安防(fang)行業(ye)的大數(shu)據主要來源于平安城市、智能交通(tong)等大型項目。據IMS Research 統計(ji)(ji),2011 年(nian)全球攝(she)(she)像頭的出貨量達到2646萬(wan)臺,預計(ji)(ji)到2015 年(nian)攝(she)(she)像頭出貨量達5454萬(wan)臺。2011 年(nian)一天產生(sheng)的視(shi)頻(pin)(pin)監控數(shu)據超過(guo)1500PB,而累(lei)計(ji)(ji)歷史數(shu)據將更為龐(pang)大,在視(shi)頻(pin)(pin)監控大聯(lian)網、高清化(hua)推(tui)動下(xia),視(shi)頻(pin)(pin)監控業(ye)務步入大數(shu)據洪水時代不可(ke)避免。
智能大數據的最終目的是什么?
2012年(nian)的時(shi)候,筆者(zhe)去廣東(dong)中(zhong)山交(jiao)(jiao)(jiao)警(jing)支(zhi)隊(dui),并與周警(jing)官交(jiao)(jiao)(jiao)流。當(dang)時(shi)大(da)數據是一(yi)個互聯網概念,還沒有在交(jiao)(jiao)(jiao)警(jing)行業開始應用。在和周警(jing)官交(jiao)(jiao)(jiao)流的過程中(zhong),他(ta)說了一(yi)段話,時(shi)隔多年(nian),仍記憶(yi)猶(you)新。
周警(jing)官說(shuo),在中(zhong)山(shan)市(shi),天晴(qing)的(de)時(shi)候不堵車(che)(che)(che),下(xia)雨(yu)(yu)(yu)的(de)時(shi)候就堵車(che)(che)(che)。他(ta)剛開始感性地覺得是因為交(jiao)(jiao)(jiao)(jiao)通(tong)事故造成了(le)擁堵,后(hou)來分(fen)析交(jiao)(jiao)(jiao)(jiao)通(tong)事故處理(li)數(shu)據,發現下(xia)雨(yu)(yu)(yu)的(de)日子(zi)交(jiao)(jiao)(jiao)(jiao)通(tong)事故量(liang)并沒有(you)比平時(shi)多(duo)。分(fen)析了(le)一(yi)(yi)(yi)下(xia)車(che)(che)(che)流(liu)量(liang),讓他(ta)驚奇的(de)是下(xia)雨(yu)(yu)(yu)的(de)日子(zi)的(de)車(che)(che)(che)流(liu)量(liang)比平時(shi)大(da),一(yi)(yi)(yi)般(ban)來說(shuo)下(xia)雨(yu)(yu)(yu)大(da)家都不愿意外出才對,為什(shen)么下(xia)雨(yu)(yu)(yu)的(de)車(che)(che)(che)流(liu)量(liang)會增(zeng)大(da)呢? 周警(jing)官做了(le)進(jin)(jin)一(yi)(yi)(yi)步分(fen)析,深(shen)入了(le)解中(zhong)山(shan)的(de)家庭(ting)用車(che)(che)(che)方(fang)(fang)式,發現中(zhong)山(shan)本地家庭(ting)一(yi)(yi)(yi)般(ban)都很(hen)富裕(yu),家里一(yi)(yi)(yi)般(ban)是每人一(yi)(yi)(yi)車(che)(che)(che),他(ta)們的(de)出行(xing)(xing)每天都是家里到(dao)工(gong)作(zuo)地點,中(zhong)午還會回(hui)家吃飯,一(yi)(yi)(yi)般(ban)出行(xing)(xing)距(ju)離都在3-5KM。天晴(qing)的(de)時(shi)候,他(ta)們一(yi)(yi)(yi)般(ban)選(xuan)擇電瓶(ping)車(che)(che)(che)、摩托車(che)(che)(che),方(fang)(fang)便快(kuai)捷,容(rong)易停(ting)車(che)(che)(che)。下(xia)雨(yu)(yu)(yu)的(de)時(shi)候,他(ta)們一(yi)(yi)(yi)般(ban)選(xuan)擇小汽車(che)(che)(che),不被淋(lin)雨(yu)(yu)(yu),更舒適。由于這(zhe)(zhe)種出行(xing)(xing)方(fang)(fang)式的(de)選(xuan)擇,造成了(le)中(zhong)山(shan)市(shi)一(yi)(yi)(yi)下(xia)雨(yu)(yu)(yu)就車(che)(che)(che)流(liu)量(liang)大(da),就容(rong)易堵車(che)(che)(che),這(zhe)(zhe)是一(yi)(yi)(yi)個城市(shi)的(de)交(jiao)(jiao)(jiao)(jiao)通(tong)特性。分(fen)析出這(zhe)(zhe)種特性后(hou),交(jiao)(jiao)(jiao)(jiao)通(tong)管理(li)者才能更有(you)效的(de)對交(jiao)(jiao)(jiao)(jiao)通(tong)進(jin)(jin)行(xing)(xing)引導、疏導。
三(san)年后的(de)今(jin)天,再去看周警(jing)官(guan)(guan)的(de)這(zhe)段話,發(fa)現(xian)周警(jing)官(guan)(guan)已經完成了(le)原始的(de)大(da)數據(ju)分析。他將各種看似沒有直接聯系的(de)數據(ju),通(tong)過他的(de)分析模型組合起來(lai),發(fa)現(xian)了(le)中山(shan)市的(de)交(jiao)通(tong)特性。這(zhe)個正是(shi)大(da)數據(ju)在(zai)交(jiao)通(tong)行業最大(da)的(de)價值。
現在我們(men)已經可(ke)以通(tong)過電警、卡(ka)口、微(wei)波、地(di)磁、天氣(qi)環境等各種檢測傳感設備,將車流量(liang)的(de)(de)數(shu)據進行(xing)各種綜合的(de)(de)大數(shu)據分(fen)析(xi),分(fen)析(xi)出一個城市的(de)(de)交通(tong)模型(xing),這樣可(ke)以針對交通(tong)做(zuo)出一些可(ke)能的(de)(de)預判,幫助咱們(men)交通(tong)管理(li)者解(jie)決管理(li)難(nan)題。
智能交通大數據分析還要完善什么?
大(da)數(shu)據(ju)(ju)作(zuo)為一個工具(ju),在(zai)實際使用中,各種(zhong)廠(chang)商都在(zai)談大(da)數(shu)據(ju)(ju),都在(zai)包裝各種(zhong)大(da)數(shu)據(ju)(ju)的概念(nian)。“CloudComputing”( 云計算)、“MapReduce”( 大(da)規模數(shu)據(ju)(ju)集(ji)并行運算算法)、“Hadoop”( 開源分(fen)布(bu)式系統基(ji)礎架構) 這些概念(nian)鋪天蓋(gai)地而來。
大數據我們要思考幾個問題。
一堆服務器是大數據嗎?
一堆大容量存儲系統是大數據嗎?
一個性能巨強悍的檢索工具是大數據嗎?
但(dan)現在很(hen)多(duo)智(zhi)能交(jiao)通項目中所謂的大(da)數據僅僅就是一堆高(gao)性能服(fu)務器(qi),一堆大(da)容(rong)量存儲系(xi)統,一套(tao)快速(su)檢索工具(ju)。
交(jiao)(jiao)通管(guan)理(li)者需要什么(me)樣的大數(shu)(shu)據(ju)? 什么(me)樣的大數(shu)(shu)據(ju)系(xi)統最能幫助解(jie)決實際交(jiao)(jiao)通問(wen)題? 我(wo)們(men)認(ren)為智能交(jiao)(jiao)通的大數(shu)(shu)據(ju)應該是:通過交(jiao)(jiao)通管(guan)理(li)需求(qiu)出發,建立(li)數(shu)(shu)學分(fen)(fen)析(xi)模(mo)型,對(dui)接(jie)各種數(shu)(shu)據(ju)系(xi)統,從海量的數(shu)(shu)據(ju)中分(fen)(fen)析(xi)挖(wa)掘(jue)出對(dui)交(jiao)(jiao)通管(guan)理(li)有用的信息。我(wo)們(men)認(ren)為智能交(jiao)(jiao)通領域大數(shu)(shu)據(ju)的價值是通過交(jiao)(jiao)通管(guan)理(li)業務(wu)需求(qiu),建立(li)起(qi)來的數(shu)(shu)學算法分(fen)(fen)析(xi)模(mo)型。
現階段大數據在智能交通的的應用還存在以下不完善的地方:
1、數據格式不統一
各(ge)(ge)地交通管理部門(men)(men)一般(ban)都(dou)已經(jing)建設(she)了(le)幾(ji)期(qi)(qi)項目,這(zhe)(zhe)些(xie)項目因為各(ge)(ge)種(zhong)原因,設(she)備廠商可(ke)能不一致,設(she)備型號各(ge)(ge)異,存(cun)儲下來的(de)數(shu)據格式五花(hua)八門(men)(men),這(zhe)(zhe)樣的(de)數(shu)據對于后期(qi)(qi)的(de)大(da)數(shu)據應用極(ji)為不利,一個項目往往花(hua)費大(da)量的(de)時間(jian)和精力在解決各(ge)(ge)種(zhong)數(shu)據的(de)整合(he)上。
2、各種數據源獲取困難
和智能(neng)交(jiao)通(tong)(tong)相關的各種數(shu)(shu)據,如:車(che)輛客流量(liang)(liang)數(shu)(shu)據、氣象(xiang)數(shu)(shu)據、移動通(tong)(tong)訊(xun)設備數(shu)(shu)據。將這些(xie)數(shu)(shu)據拉通(tong)(tong),能(neng)對交(jiao)通(tong)(tong)流量(liang)(liang)做好預判工作,但這些(xie)數(shu)(shu)據往往屬(shu)于不(bu)同的管理(li)部門,將這些(xie)數(shu)(shu)據納入一個系(xi)統進行綜(zong)合數(shu)(shu)據分析的難(nan)度大。
3、大數據方案沒有從業務需求出發
有(you)(you)很多廠(chang)商(shang)在提大(da)數(shu)(shu)(shu)據概念的(de)(de)(de)時候,僅(jin)僅(jin)是為(wei)了(le)賣(mai)一(yi)(yi)些服(fu)務器,賣(mai)一(yi)(yi)些存(cun)儲,這些硬(ying)件解(jie)決不(bu)(bu)了(le)客(ke)戶的(de)(de)(de)需(xu)求(qiu)。還有(you)(you)一(yi)(yi)些廠(chang)商(shang)將互聯網的(de)(de)(de)大(da)數(shu)(shu)(shu)據搜(sou)索引擎直(zhi)接拿(na)到智(zhi)能(neng)交(jiao)(jiao)通解(jie)決方案(an)(an)中(zhong)使用,完全不(bu)(bu)考慮交(jiao)(jiao)通管(guan)(guan)理(li)部門對(dui)于數(shu)(shu)(shu)據的(de)(de)(de)需(xu)求(qiu),雖(sui)然其(qi)提供的(de)(de)(de)方案(an)(an)數(shu)(shu)(shu)據搜(sou)索能(neng)力驚人,但不(bu)(bu)能(neng)解(jie)決實際交(jiao)(jiao)通管(guan)(guan)理(li)的(de)(de)(de)業務需(xu)求(qiu)。我們宇視(shi)科技從交(jiao)(jiao)通管(guan)(guan)理(li)部門的(de)(de)(de)實際業務出發,規劃大(da)數(shu)(shu)(shu)據架構(gou),調整數(shu)(shu)(shu)據庫結構(gou),建立(li)符合業務需(xu)求(qiu)的(de)(de)(de)數(shu)(shu)(shu)學(xue)分析(xi)模型(xing),將對(dui)交(jiao)(jiao)通管(guan)(guan)理(li)有(you)(you)用的(de)(de)(de)信(xin)息從海量的(de)(de)(de)原始數(shu)(shu)(shu)據中(zhong)分析(xi)出來,并按照交(jiao)(jiao)通管(guan)(guan)理(li)的(de)(de)(de)需(xu)求(qiu),做(zuo)圖形化的(de)(de)(de)直(zhi)觀呈現。
大數據在智能交通領域的落地
大數(shu)(shu)據在智(zhi)能交通的(de)(de)落地受限的(de)(de)因素(su)很多(duo)(duo),有(you)項目(mu)的(de)(de)規劃,有(you)早期(qi)項目(mu)數(shu)(shu)據的(de)(de)整(zheng)合,有(you)主管部門對(dui)(dui)于大數(shu)(shu)據業務(wu)的(de)(de)重(zhong)視程度。在遼寧省丹東市交警(jing)支隊(dui)的(de)(de)案例中對(dui)(dui)多(duo)(duo)種交通數(shu)(shu)據進行整(zheng)合,實現了(le)大數(shu)(shu)據的(de)(de)綜合應用。在丹東項目(mu)中主要應用的(de)(de)新功能有(you)以(yi)下3 點:
大數據
1、智能套牌
利用卡(ka)口(kou)(kou)相機上報的抓拍時(shi)間(jian)(jian)和(he)車(che)牌信(xin)(xin)息,自動分析車(che)輛所經(jing)過卡(ka)口(kou)(kou)的連(lian)通性、卡(ka)口(kou)(kou)間(jian)(jian)最(zui)小時(shi)間(jian)(jian)間(jian)(jian)隔,當發現兩組或(huo)(huo)者多組獨立運(yun)行的相同車(che)牌,或(huo)(huo)者相同車(che)牌的過車(che)信(xin)(xin)息小于對應卡(ka)口(kou)(kou)間(jian)(jian)最(zui)小時(shi)間(jian)(jian)間(jian)(jian)隔,則上報套牌預警。
2、異常軌跡智能預警
對所存儲的(de)(de)(de)海量過(guo)車(che)數據進(jin)行(xing)深入挖掘(jue),分析出每輛(liang)車(che)的(de)(de)(de)時空軌跡規律,建立車(che)輛(liang)軌跡模(mo)型。自動(dong)挖掘(jue)出從(cong)事不(bu)法(fa)活動(dong)的(de)(de)(de)車(che)輛(liang)( 比如非法(fa)營運車(che)輛(liang),販(fan)毒車(che)輛(liang)),將交(jiao)通(tong)事件研(yan)判(pan)從(cong)事后查詢,逐步向事前預(yu)警(jing)轉變,為交(jiao)通(tong)等行(xing)業提(ti)供有效的(de)(de)(de)信息服務; 對于正常出行(xing)的(de)(de)(de)車(che)輛(liang),如果行(xing)駛軌跡存在某種(zhong)與數據模(mo)型不(bu)符合的(de)(de)(de)突變,自動(dong)進(jin)行(xing)重點監(jian)測,當達到一(yi)定條(tiao)件時觸發告警(jing)。
3、車牌快速檢索
通(tong)過適當(dang)地(di)增加數據(ju)庫中的車牌冗余信息(xi),提高車牌模糊搜索的速度,滿足用戶(hu)對以車牌為檢索條(tiao)件的實時性要求。
現有(you)(you)的(de)(de)全(quan)文(wen)搜索(suo)引擎技(ji)術無法準確判(pan)斷字符(fu)在(zai)車牌(pai)中的(de)(de)位置,導致(zhi)模糊(hu)檢(jian)(jian)(jian)索(suo)結果(guo)存在(zai)大量無效的(de)(de)檢(jian)(jian)(jian)索(suo)結果(guo)。通過(guo)優化(hua)現有(you)(you)的(de)(de)全(quan)文(wen)檢(jian)(jian)(jian)索(suo)搜索(suo)引擎技(ji)術,既利用了搜索(suo)引擎的(de)(de)快速(su)檢(jian)(jian)(jian)索(suo)功能,同(tong)時實(shi)現了車牌(pai)精(jing)確的(de)(de)模糊(hu)檢(jian)(jian)(jian)索(suo)。
利(li)用過(guo)車記(ji)錄中的(de)時間(jian)信息來創建、合并不(bu)同時間(jian)段(duan)的(de)索(suo)引(yin)(yin)文件,根(gen)據查詢條(tiao)件中的(de)時間(jian)過(guo)濾(lv)條(tiao)件,快速(su)定(ding)位到(dao)具體(ti)的(de)索(suo)引(yin)(yin)文件,通過(guo)索(suo)引(yin)(yin)文件的(de)時間(jian)段(duan)信息,實現快速(su)排(pai)序。
重“數據”的時代已經到來
交(jiao)(jiao)通(tong)(tong)信(xin)息按照市場(chang)引導(dao)、價值驅動的(de)(de)方(fang)式在各利益相關方(fang)之(zhi)間流動,并逐(zhu)步形成新(xin)的(de)(de)市場(chang)和營利點,加快交(jiao)(jiao)通(tong)(tong)信(xin)息服(fu)務的(de)(de)產(chan)業化進程。“數(shu)(shu)據(ju)為(wei)(wei)王”的(de)(de)大數(shu)(shu)據(ju)時代已經到來。智能交(jiao)(jiao)通(tong)(tong)作(zuo)為(wei)(wei)通(tong)(tong)信(xin)、計算(suan)(suan)機和控(kong)制(zhi)技(ji)術在交(jiao)(jiao)通(tong)(tong)運輸領域集成應用(yong)的(de)(de)產(chan)物,也為(wei)(wei)云計算(suan)(suan)、大數(shu)(shu)據(ju)、智能終(zhong)端等新(xin)技(ji)術提供率先應用(yong)的(de)(de)環(huan)境,并為(wei)(wei)其(qi)提供廣(guang)闊的(de)(de)市場(chang)空間。交(jiao)(jiao)通(tong)(tong)大數(shu)(shu)據(ju)的(de)(de)開發利用(yong),不僅會推(tui)進智能交(jiao)(jiao)通(tong)(tong)更(geng)加快速地發展(zhan),也將為(wei)(wei)公眾提供更(geng)加便捷、高效、綠色(se)、安全的(de)(de)出行環(huan)境,創造更(geng)加美(mei)好的(de)(de)生活。
大(da)數(shu)據(ju)正(zheng)在超越數(shu)據(ju)本身。在大(da)數(shu)據(ju)時代,通過挖(wa)掘(jue)與分析數(shu)據(ju)的新商業(ye)價值,將(jiang)為(wei)產業(ye)帶來巨(ju)大(da)的商機,智能(neng)交通也(ye)將(jiang)在大(da)數(shu)據(ju)支撐下向智慧化邁進。