公安大數(shù)據(jù)應(yīng)用時(shí)代,如何將多模態(tài)的感知數(shù)據(jù)進(jìn)行融合、碰撞,為智慧警務(wù)提供豐富的多維度案件研判手段,是當(dāng)前公安實(shí)戰(zhàn)面臨的迫切需求。而語義智能則代表著多模態(tài)數(shù)據(jù)融合治理的技術(shù)發(fā)展趨勢。
深度學(xué)習(xí)技術(shù)走向“語義智能”
實(shí)際上,2006年深度學(xué)習(xí)技術(shù)的概念就已被提出,只是到 2012年才被市場迅速接受和認(rèn)可,而圍繞圖像識別領(lǐng)域的技術(shù)應(yīng)用突破,促進(jìn)了整個(gè)深度學(xué)習(xí)技術(shù)在視覺領(lǐng)域爆發(fā)。2017-2018年期間,國家雪亮工程建設(shè)的推動(dòng),使得深度學(xué)習(xí)技術(shù)將視頻解析能力推向一個(gè)新臺階。2018年,谷歌開源UI 框架 Flutter Beta,推出了自然語言處理技術(shù),這是NLP整個(gè)技術(shù)領(lǐng)域的一個(gè)大發(fā)展。
在安防應(yīng)用領(lǐng)域,海量的物聯(lián)視頻數(shù)據(jù)催生出圍繞大數(shù)據(jù)服務(wù)的市場空間,傳統(tǒng)的單模態(tài)數(shù)據(jù)顯然無法應(yīng)對當(dāng)前公安大數(shù)據(jù)實(shí)戰(zhàn)需求。在此趨勢下,急需通過多維數(shù)據(jù)結(jié)合智能算法融合分析即多模態(tài)智能,形成人員與數(shù)十種實(shí)體的關(guān)系建模與智能匹配,建立不同維度和不同粒度間的數(shù)據(jù)聯(lián)系,為智慧警務(wù)研判提供更為豐富的研判手段。
多模態(tài)智能即我們說的語義智能,屬于NLP技術(shù)領(lǐng)域的一個(gè)分支,是深度學(xué)習(xí)技術(shù)的最新演進(jìn)。語義智能不等于語義解析,其智能化體現(xiàn)是不但可以像人一樣擁有視覺和聽覺,而且還能像人一樣思考和行動(dòng),只有這樣一個(gè)完整的智能化狀態(tài),才能使AI達(dá)到一個(gè)高度的人機(jī)協(xié)同的狀態(tài),從而更好地解決多模態(tài)數(shù)據(jù)融合治理和應(yīng)用。
多模態(tài)數(shù)據(jù)融合治理的技術(shù)支撐
1、基于大數(shù)據(jù)平臺的融合技術(shù),從基本信息、身份特質(zhì)、背景、異常行為等多個(gè)不同維度,結(jié)合智能算法形成人員、車輛、 MAC、RFID、設(shè)備等豐富的實(shí)體智能標(biāo)簽體系,打造一個(gè)完整的知識圖譜庫;2、語義的分析及推理非常關(guān)鍵,能夠?qū)崿F(xiàn)案情相關(guān)知識圖譜的提取,從案件中自動(dòng)分析出案發(fā)時(shí)間、案發(fā) 地點(diǎn)、作案手段、關(guān)聯(lián)實(shí)體等結(jié)構(gòu)化內(nèi)容;3、數(shù)據(jù)冷、溫、熱分層處理技術(shù)設(shè),提升在大數(shù)據(jù)量級,多種類融合背景下應(yīng)用的查詢速度和資源調(diào)度效能能。
截止到現(xiàn)在,熙菱每年多維數(shù)據(jù)融合分析計(jì)算的數(shù)據(jù)量超過2000億,日常輔助公安的實(shí)戰(zhàn)算法超過30種。2019進(jìn)博會(huì)的安保項(xiàng)目,是熙菱在多模態(tài)數(shù)據(jù)融合應(yīng)用方面最經(jīng)典的案例。
(本文源自2019 a&s人工智能創(chuàng)新應(yīng)用趨勢論壇上熙菱集團(tuán)副總經(jīng)理張登的主題演講)