宇視大(da)數據(ju)(ju)平臺充分(fen)發揮了IT 技術積淀(dian)的(de)實(shi)力,具有(you)海量數據(ju)(ju)處(chu)理快速(su)、檢索(suo)精(jing)準、研判深(shen)入、功能豐富等特點,全局分(fen)析、管理及(ji)布(bu)控能力強(qiang),是(shi)智慧城市發展的(de)強(qiang)有(you)力工具,尤其基于“車”的(de)分(fen)析優(you)勢凸顯。
1、強大集群組網能力
宇視大數據(ju)(ju)管理平臺是基(ji)于UniviewDR9500 (Data Retrieval Server) 數據(ju)(ju)檢索(suo)(suo)服務器(qi) (下(xia)文(wen)簡稱 DR9500)實現的(de)(de)大數據(ju)(ju)分析(xi)應(ying)用。該服務器(qi)為2U 架構,采用支持(chi)(chi)負載均衡(heng)的(de)(de)千兆(zhao)自適應(ying)網絡組網。單機提供高(gao)(gao)達10 億條信息的(de)(de)數據(ju)(ju)檢索(suo)(suo)服務,可獨立使用;不(bu)過(guo)在大數據(ju)(ju)處理應(ying)用中,一般(ban)采用集群架構,通過(guo)集群可支持(chi)(chi)高(gao)(gao)達千億級數據(ju)(ju)的(de)(de)檢索(suo)(suo)。
宇視大數據(ju)管理(li)平(ping)臺基于DB9500 的服(fu)(fu)務集群又分為檢索服(fu)(fu)務器集群和數據(ju)庫服(fu)(fu)務器集群:
檢索服(fu)務(wu)(wu)器(qi)集(ji)群:提(ti)供有(you)兩臺檢索服(fu)務(wu)(wu)器(qi)管理(li)(li)節(jie)點(dian),其中一(yi)臺為(wei)主用(yong),一(yi)臺為(wei)備(bei)(bei)用(yong),以備(bei)(bei)主用(yong)服(fu)務(wu)(wu)器(qi)出現(xian)問題時(shi),備(bei)(bei)用(yong)服(fu)務(wu)(wu)器(qi)將無縫接(jie)管。在(zai)管理(li)(li)服(fu)務(wu)(wu)器(qi)的(de)下層,則為(wei)檢索運算服(fu)務(wu)(wu)器(qi)節(jie)點(dian),負責數(shu)(shu)據(ju)檢索用(yong),檢索運算服(fu)務(wu)(wu)器(qi)節(jie)點(dian)之間支持(chi)負載均衡功(gong)能,當(dang)指定服(fu)務(wu)(wu)器(qi)數(shu)(shu)據(ju)處理(li)(li)任務(wu)(wu)繁重(zhong)時(shi),空閑服(fu)務(wu)(wu)器(qi)將會接(jie)替部分數(shu)(shu)據(ju)的(de)處理(li)(li);同(tong)時(shi)還支持(chi)冗(rong)余災(zai)備(bei)(bei)設計,當(dang)某臺或多臺檢索運算服(fu)務(wu)(wu)器(qi)出現(xian)故障時(shi),其他正常(chang)服(fu)務(wu)(wu)器(qi)將接(jie)管故障服(fu)務(wu)(wu)器(qi)的(de)工(gong)作。由此可見,宇視科技的(de)檢索服(fu)務(wu)(wu)器(qi)集(ji)群設計了完善的(de)冗(rong)余災(zai)備(bei)(bei)功(gong)能,且具有(you)很(hen)強的(de)數(shu)(shu)據(ju)檢索能力;
數(shu)據(ju)庫服務器集群:主(zhu)要(yao)用于(yu)數(shu)據(ju)存儲(chu)和(he)計算,與(yu)檢索(suo)節點集群的(de)設計架構一樣,同樣設計了兩臺互為冗余(yu)災(zai)備的(de)管理節點,多臺支持(chi)冗余(yu)災(zai)備和(he)負(fu)載均(jun)衡的(de)數(shu)據(ju)節點(集群)。
宇視大數(shu)(shu)(shu)據管理(li)(li)平臺(tai)的服務(wu)器(qi)集(ji)群(qun)(qun)為分布(bu)式運算(suan)形式布(bu)建,且檢索(suo)集(ji)群(qun)(qun)和數(shu)(shu)(shu)據庫集(ji)群(qun)(qun)的主從式架構均支持1(管理(li)(li)節點(dian)(dian)):1000(數(shu)(shu)(shu)據節點(dian)(dian))的強大管理(li)(li)功能(neng),能(neng)滿足(zu)當前智能(neng)交通、平安城(cheng)市的海量數(shu)(shu)(shu)據檢索(suo)需求。當處理(li)(li)數(shu)(shu)(shu)據量小于30 億時,管理(li)(li)節點(dian)(dian)和數(shu)(shu)(shu)據節點(dian)(dian)將可以合(he)并到(dao)同一(yi)臺(tai)服務(wu)器(qi)中(zhong)(zhong),以應(ying)對中(zhong)(zhong)小片區的數(shu)(shu)(shu)據管理(li)(li)和檢索(suo)需求。
2、云架構+ 搜索引擎頂級設計
宇視基于DB9500 的(de)(de)大數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)管理(li)(li)平臺使用(yong)Hadoop 技(ji)術(shu)構(gou)建(jian)數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)存(cun)儲集(ji)群(qun),使得計(ji)算和(he)存(cun)儲一體(ti)化(hua);通過搜索引擎技(ji)術(shu)實現數(shu)(shu)(shu)(shu)(shu)字、文本信息等的(de)(de)快速檢索功能。其采(cai)用(yong)資源(yuan)層、數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)應用(yong)服(fu)務(wu)(wu)(含數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)存(cun)儲和(he)數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)計(ji)算)、業務(wu)(wu)應用(yong)三層架構(gou),將接(jie)入(ru)的(de)(de)原始(shi)數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)進(jin)行(xing)結構(gou)化(hua)處(chu)理(li)(li),通過云存(cun)儲和(he)云計(ji)算技(ji)術(shu)支撐構(gou)建(jian)能高(gao)效、精準處(chu)理(li)(li)的(de)(de)數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)庫,完成(cheng)數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)的(de)(de)抽象與關聯,實現數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)應用(yong)服(fu)務(wu)(wu)和(he)數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)的(de)(de)可視化(hua)管理(li)(li),從而(er)滿足不同行(xing)業業務(wu)(wu)應用(yong)需求。該大數(shu)(shu)(shu)(shu)(shu)據(ju)(ju)(ju)解決(jue)方案具有四大特點:
一是海(hai)量(liang)數據結構化存儲:提供(gong)高可靠性(xing)、高容錯性(xing)、高準確(que)性(xing)、高效處理性(xing)的海(hai)量(liang)數據結構化存儲解決方案,支持無縫容量(liang)擴展;
二(er)是海量數據(ju)的高精準檢索: 結合Hadoop 架構和(he)安防數據(ju)特征(zheng),創新推出(chu)時空數據(ju)庫(ku),具備比通用(yong) Hadoop 更快的檢索和(he)計算(suan)能力,支(zhi)持百億記(ji)錄的秒級高速查詢;
三是(shi)海量數據分(fen)布式計(ji)(ji)算:支持批量計(ji)(ji)算、內存迭(die)代計(ji)(ji)算、流(liu)式計(ji)(ji)算等多種分(fen)布式計(ji)(ji)算框架,結(jie)合行業數據特(te)征(zheng)的定(ding)制優化,大幅提升處理性能(neng);
四是數(shu)據增值應(ying)用(yong):基于基本的數(shu)據分(fen)析和檢索,實(shi)現(xian)數(shu)據可(ke)視化管(guan)理、可(ke)視化檢索;并由此(ci)推(tui)出全景布(bu)控、系(xi)統(tong)性(xing)(xing)(xing)/ 規(gui)律性(xing)(xing)(xing)綜(zong)合(he)分(fen)析、事件(jian)關(guan)聯性(xing)(xing)(xing)判斷(duan)、事態發展預測等上層應(ying)用(yong),實(shi)現(xian)深層次(ci)智能管(guan)理需求。
3、極速優化:秒級檢索,精準分析
宇視基于DB9500 的大數據管理平臺開發了多種大數據模型,可實現案件管理、警情管理、快速車輛查詢、快速車輛研判、車輛布控管理(如黑白紅名單過濾、占用公交車道布控、模糊車牌布控等,支持布控時間段設定)、流量統計(可根據卡口、車道、時間等條件篩選)、積分模型等大數據應用功能,另可與回放、電視墻、數字矩陣、地圖、違法處罰、告警、錄像鎖定等功能模塊聯動。適用于交通、能源、文教等行業的超大容量數據存儲及分析業務需求,并針對不同行業提供定制化優化服務。
百(bai)億數(shu)據查詢性能測試(shi)結果(775 種不同的查詢條(tiao)件)
測(ce)試(shi)所(suo)引用數據來(lai)自宇視丹(dan)東項目,數據容量(liang)> 37 億,本次在(zai)快速(su)車(che)(che)輛查(cha)詢(xun)模(mo)塊中執行(xing)的卡(ka)口機(ji)動車(che)(che)、外地機(ji)動車(che)(che)、區(qu)間機(ji)動車(che)(che)、違法等(deng)條件(jian)查(cha)詢(xun)(細分篩選(xuan)條件(jian)類型多(duo)樣,如(ru)車(che)(che)速(su)、車(che)(che)牌(pai)(pai)(pai)號、車(che)(che)色等(deng),并可(ke)定義車(che)(che)牌(pai)(pai)(pai)前綴,加(jia)快檢(jian)索速(su)度(du)),所(suo)需時間均在(zai)1s 以內完成,處理速(su)度(du)非常快。對(dui)(dui)查(cha)詢(xun)到的記錄,還(huan)可(ke)進行(xing)過車(che)(che)處理(如(ru)車(che)(che)牌(pai)(pai)(pai)未能(neng)正確識(shi)別,可(ke)關聯(lian)到對(dui)(dui)應圖片或錄像(xiang)后手(shou)動修正)、關聯(lian)案件(jian)、查(cha)看軌跡操作(zuo)。
在(zai)平(ping)臺(tai)的快速(su)車(che)輛(liang)研判模塊中,提供有套(tao)牌、跟車(che)關聯(lian)、車(che)輛(liang)頻(pin)度、車(che)輛(liang)軌(gui)跡碰(peng)撞、晝伏夜出(chu)、頻(pin)繁夜出(chu)、高危時段、多次進城(cheng)不出(chu)城(cheng)、首(shou)次進城(cheng)等(deng)應用分(fen)析(xi),可解決車(che)輛(liang)行(xing)為異(yi)常、犯罪分(fen)子(zi)踩點、違(wei)法犯罪軌(gui)跡、潛在(zai)犯罪行(xing)為、交通違(wei)規、案件偵破線索等(deng)大數據分(fen)析(xi)需求(qiu),以(yi)及(ji)失(shi)物(wu)尋回等(deng)民生(sheng)需求(qiu)。在(zai)本模塊中,基于37 億(yi)數據庫(ku),所(suo)有實操(cao)檢索所(suo)需時間(jian)亦在(zai)1s 以(yi)內快速(su)完成。據介(jie)紹,該平(ping)臺(tai)在(zai)丹東運(yun)行(xing)不到(dao)2 年的時間(jian)里,橫掃套(tao)牌不法行(xing)為,實現了(le)0 套(tao)牌管理。
除了特定(ding)類型研(yan)判,平(ping)臺還提供有(you)車輛積分(fen)(fen)模(mo)型分(fen)(fen)析(xi)(xi)功能,通(tong)過自(zi)定(ding)義積分(fen)(fen)內容及分(fen)(fen)值,當設(she)(she)定(ding)行為達到設(she)(she)定(ding)分(fen)(fen)值時,將會自(zi)動鎖(suo)定(ding)目標或(huo)告警;或(huo)是便于(yu)研(yan)究員對不同(tong)積分(fen)(fen)內容在(zai)不同(tong)時間(jian)段(duan)、不同(tong)區域(yu)、不同(tong)角色等條件(jian)下的數據分(fen)(fen)析(xi)(xi)及研(yan)判,以(yi)為道路規(gui)劃、交通(tong)壓(ya)力、警力布控等綜合(he)城市規(gui)劃建設(she)(she)提供有(you)價值的參考意見。
產品特色
1、服務器及集群組網能力強;
2、容量巨大,支持千億級大數據檢索;
3、極速檢索:百億級數據秒級檢索,處理速度快而準;
4、功能豐富:提供有檢索、研判、布控、處警等功能模塊,且各模塊聯動性強;
5、提供大數據研判功能,深度、全局分析行為關聯性、潛在危害、事件發展態勢等,并可為城市建設決策提供數據參考依據;
6、行業滲透性高:所有檢索及研判,有豐富的篩選條件,有效提高應用的精度和效率;
7、實用性(xing)強:針對平安城市現存(cun)問題和潛在問題開發;