強(qiáng)大集群組網(wǎng)能力
宇視大數(shù)據(jù)管理系統(tǒng)是一個(gè)貫穿整個(gè)數(shù)據(jù)處理層面(包括數(shù)據(jù)采集、數(shù)據(jù)應(yīng)用服務(wù)、數(shù)據(jù)可視化)的整體解決方案,整體方案基于Uniview DB9500(Data Base Server)數(shù)據(jù)庫(kù)服務(wù)器(下文簡(jiǎn)稱 DB9500)和Uniview DR9500 (Data Retrieval Server) 數(shù)據(jù)檢索服務(wù)器(下文簡(jiǎn)稱 DR9500)共同實(shí)現(xiàn)的大數(shù)據(jù)分析應(yīng)用。該服務(wù)器為2U架構(gòu),采用支持負(fù)載均衡的千兆自適應(yīng)網(wǎng)絡(luò)組網(wǎng)。DB9500單機(jī)提供10億數(shù)據(jù)存儲(chǔ)與計(jì)算服務(wù),DR9500單機(jī)提供高達(dá)10億條信息的數(shù)據(jù)檢索服務(wù),可單機(jī)使用;不過在大數(shù)據(jù)處理應(yīng)用中,同時(shí)為了配合用戶不同的項(xiàng)目規(guī)模大小,宇視科技提供不同的大數(shù)據(jù)服務(wù)設(shè)備,充分滿足不同用戶的需求;在智慧城市項(xiàng)目規(guī)模中,百億、千億級(jí)數(shù)據(jù)量規(guī)模,可選用集群方案,支持滿足高達(dá)千億級(jí)數(shù)據(jù)的管理應(yīng)用。
宇視大數(shù)據(jù)服務(wù)集群又分為檢索服務(wù)器集群和數(shù)據(jù)庫(kù)服務(wù)器集群:
檢索服務(wù)器集群:提供有兩臺(tái)檢索服務(wù)器管理節(jié)點(diǎn),其中一臺(tái)為主用,一臺(tái)為備用,以備主用服務(wù)器出現(xiàn)問題時(shí),備用服務(wù)器將無縫接管。在管理服務(wù)器的下層,則為檢索運(yùn)算服務(wù)器節(jié)點(diǎn),負(fù)責(zé)數(shù)據(jù)檢索用,檢索運(yùn)算服務(wù)器節(jié)點(diǎn)之間支持負(fù)載均衡功能,當(dāng)指定服務(wù)器數(shù)據(jù)處理任務(wù)繁重時(shí),空閑服務(wù)器將會(huì)接替部分?jǐn)?shù)據(jù)的處理;同時(shí)還支持冗余災(zāi)備設(shè)計(jì),當(dāng)某臺(tái)或多臺(tái)檢索運(yùn)算服務(wù)器出現(xiàn)故障時(shí),其他正常服務(wù)器將接管故障服務(wù)器的工作。由此可見,宇視科技的檢索服務(wù)器集群設(shè)計(jì)了完善的冗余災(zāi)備功能,且具有很強(qiáng)的數(shù)據(jù)檢索能力;
數(shù)據(jù)庫(kù)服務(wù)器集群:主要用于數(shù)據(jù)存儲(chǔ)和計(jì)算,與檢索節(jié)點(diǎn)集群的設(shè)計(jì)架構(gòu)一樣,同樣設(shè)計(jì)了兩臺(tái)互為冗余災(zāi)備的管理節(jié)點(diǎn),多臺(tái)支持冗余災(zāi)備和負(fù)載均衡的數(shù)據(jù)節(jié)點(diǎn)(集群)。
宇視大數(shù)據(jù)管理平臺(tái)的服務(wù)器集群為分布式運(yùn)算形式布建,且檢索集群和數(shù)據(jù)庫(kù)集群的主從式架構(gòu)均支持1(管理節(jié)點(diǎn)): 1000(數(shù)據(jù)節(jié)點(diǎn))的強(qiáng)大管理功能,能滿足當(dāng)前智能交通、平安城市的海量數(shù)據(jù)檢索需求。當(dāng)處理數(shù)據(jù)量小于30億時(shí),管理節(jié)點(diǎn)和數(shù)據(jù)節(jié)點(diǎn)將可以合并到同一臺(tái)服務(wù)器中,以應(yīng)對(duì)中小片區(qū)的數(shù)據(jù)管理和檢索需求。
云架構(gòu)+搜索引擎頂級(jí)設(shè)計(jì)
宇視科技基于DB9500/DR9500的大數(shù)據(jù)管理平臺(tái)使用Hadoop技術(shù)構(gòu)建數(shù)據(jù)存儲(chǔ)集群,使得計(jì)算和存儲(chǔ)一體化;通過搜索引擎技術(shù)實(shí)現(xiàn)數(shù)字、文本信息等的快速檢索功能。其采用資源層、數(shù)據(jù)應(yīng)用服務(wù)(含數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)計(jì)算)、業(yè)務(wù)應(yīng)用三層架構(gòu),將接入的原始數(shù)據(jù)進(jìn)行結(jié)構(gòu)化處理,通過云存儲(chǔ)和云計(jì)算技術(shù)支撐構(gòu)建能高效、精準(zhǔn)處理的數(shù)據(jù)庫(kù),完成數(shù)據(jù)的抽象與關(guān)聯(lián),實(shí)現(xiàn)數(shù)據(jù)應(yīng)用服務(wù)和數(shù)據(jù)的可視化管理,從而滿足不同行業(yè)業(yè)務(wù)應(yīng)用需求。該大數(shù)據(jù)解決方案具有四大特點(diǎn):
一是海量數(shù)據(jù)結(jié)構(gòu)化存儲(chǔ):提供高可靠性、高容錯(cuò)性、高準(zhǔn)確性、高效處理性的海量數(shù)據(jù)結(jié)構(gòu)化存儲(chǔ)解決方案,支持無縫容量擴(kuò)展;
二是海量數(shù)據(jù)的高精準(zhǔn)檢索:結(jié)合Hadoop架構(gòu)和安防數(shù)據(jù)特征,宇視科技創(chuàng)新推出時(shí)空數(shù)據(jù)庫(kù),具備比通用 Hadoop 更快的檢索和計(jì)算能力,支持百億記錄的秒級(jí)高速查詢;
三是海量數(shù)據(jù)分布式計(jì)算:支持批量計(jì)算、內(nèi)存迭代計(jì)算、流式計(jì)算等多種分布式計(jì)算框架,結(jié)合行業(yè)數(shù)據(jù)特征的定制優(yōu)化,大幅提升處理性能;
四是數(shù)據(jù)增值應(yīng)用:基于基本的數(shù)據(jù)分析和檢索,實(shí)現(xiàn)數(shù)據(jù)可視化管理、可視化檢索;并由此推出全景布控、系統(tǒng)性/規(guī)律性綜合分析、事件關(guān)聯(lián)性判斷、事態(tài)發(fā)展預(yù)測(cè)等上層應(yīng)用,實(shí)現(xiàn)深層次智能管理需求。
極速優(yōu)化:秒級(jí)檢索,精準(zhǔn)分析
宇視科技基于DB9500/DR9500的大數(shù)據(jù)管理平臺(tái)開發(fā)了多種大數(shù)據(jù)模型,率先突破百億數(shù)據(jù)型檢,可實(shí)現(xiàn)案件管理、警情管理、快速車輛查詢、快速車輛研判、車輛布控管理(如黑白紅名單過濾、占用公交車道布控、模糊車牌布控等,支持布控時(shí)間段設(shè)定)、流量統(tǒng)計(jì)(可根據(jù)卡口、車道、時(shí)間等條件篩選)、積分模型等大數(shù)據(jù)應(yīng)用功能,另可與回放、電視墻、數(shù)字矩陣、地圖、違法處罰、告警、錄像鎖定等功能模塊聯(lián)動(dòng)。適用于公安、交通、司法、能源、文教等行業(yè)的超大容量數(shù)據(jù)存儲(chǔ)及分析業(yè)務(wù)需求,并針對(duì)不同行業(yè)提供定制化優(yōu)化服務(wù),以公安行業(yè)應(yīng)用為例介紹,其在提供精確查詢、布爾查詢、模糊查詢等多種檢索模式下,植入了近實(shí)時(shí)索引、時(shí)間過濾/排序優(yōu)化及其它用戶個(gè)性化定制功能(如相似車牌檢索、公安行業(yè)專用術(shù)語詞庫(kù)、多組織勾選等)。
測(cè)試所引用數(shù)據(jù)來自宇視科技丹東項(xiàng)目,數(shù)據(jù)容量>50億,本次在快速車輛查詢模塊中執(zhí)行的卡口機(jī)動(dòng)車、外地機(jī)動(dòng)車、區(qū)間機(jī)動(dòng)車、違法等條件查詢(細(xì)分篩選條件類型多樣,如車速、車牌號(hào)、車色等,并可定義車牌前綴,加快檢索速度),所需時(shí)間均在1s以內(nèi)完成,處理速度非???。對(duì)查詢到的記錄,還可進(jìn)行過車處理(如車牌未能正確識(shí)別,可關(guān)聯(lián)到對(duì)應(yīng)圖片或錄像后手動(dòng)修正)、關(guān)聯(lián)案件、查看軌跡操作。
在平臺(tái)的快速車輛研判模塊中,提供有套牌、跟車關(guān)聯(lián)、車輛頻度、車輛軌跡碰撞、晝伏夜出、頻繁夜出、高危時(shí)段、多次進(jìn)城不出城、首次進(jìn)城等應(yīng)用分析,可解決車輛行為異常、犯罪分子踩點(diǎn)、違法犯罪軌跡、潛在犯罪行為、交通違規(guī)、案件偵破線索等公安刑偵大數(shù)據(jù)分析需求,以及失物尋回等民生需求。在本模塊中,基于>50億數(shù)據(jù)庫(kù),所有實(shí)操檢索所需時(shí)間亦在1s以內(nèi)快速完成。據(jù)介紹,該平臺(tái)在丹東運(yùn)行不到2年的時(shí)間里,橫掃套牌不法行為,實(shí)現(xiàn)了0套牌管理。
除了特定類型研判,平臺(tái)還提供有車輛積分模型分析功能,通過自定義積分內(nèi)容及分值,當(dāng)設(shè)定行為達(dá)到設(shè)定分值時(shí),將會(huì)自動(dòng)鎖定目標(biāo)或告警;或是便于研究員對(duì)不同積分內(nèi)容在不同時(shí)間段、不同區(qū)域、不同角色等條件下的數(shù)據(jù)分析及研判,以為道路規(guī)劃、交通壓力、警力布控等綜合城市規(guī)劃建設(shè)提供有價(jià)值的參考意見。
精準(zhǔn)而快速的檢索
?精準(zhǔn)而快速的檢索
?精準(zhǔn)而快速的檢索
?精準(zhǔn)而快速的檢索
產(chǎn)品特色
1、服務(wù)器集群組網(wǎng)能力強(qiáng);
2、容量巨大,支持千億級(jí)大數(shù)據(jù)檢索;
3、極速檢索:百億級(jí)數(shù)據(jù)秒級(jí)檢索,處理速度快而準(zhǔn);
4、功能豐富:提供有檢索、研判、布控、處警等功能模塊,且各模塊聯(lián)動(dòng)性強(qiáng);
5、提供大數(shù)據(jù)研判功能,深度、全局分析行為關(guān)聯(lián)性、潛在危害、事件發(fā)展態(tài)勢(shì)等,并可為城市建設(shè)決策提供數(shù)據(jù)參考依據(jù);
6、行業(yè)滲透性高:所有檢索及研判,有豐富的篩選條件,有效提高檢索的精度和效率;
7、實(shí)用性強(qiáng):針對(duì)平安城市現(xiàn)存問題和潛在問題開發(fā)。
專家觀點(diǎn)
宇視科技的大數(shù)據(jù)平臺(tái)充分發(fā)揮了其IT背景的技術(shù)實(shí)力,具有海量數(shù)據(jù)處理快速、檢索精準(zhǔn)、研判深入、功能豐富等特點(diǎn),全局分析、管理及布控能力強(qiáng),是智慧城市發(fā)展的強(qiáng)有力工具。
提升空間
智慧城市數(shù)據(jù)類型及應(yīng)用方向復(fù)雜,該方案可在多數(shù)據(jù)應(yīng)用提升價(jià)值,擴(kuò)展支持各類數(shù)據(jù)的應(yīng)用研判,用以滿足復(fù)雜的智慧城市管理。