在傳統(tǒng)安防系統(tǒng)中,面對(duì)海量監(jiān)控視頻,用戶往往需要依賴時(shí)間戳、設(shè)備編號(hào)或固定屬性進(jìn)行檢索,目標(biāo)查找困難、效率低下且操作門(mén)檻高。這一情況讓企業(yè)安防場(chǎng)景對(duì)?低成本、高集成度的邊緣計(jì)算設(shè)備?需求激增?;诖?,??低曌钚峦瞥隽宋乃严盗? NVR,憑借多模態(tài)大模型與嵌入式硬件的深度融合,革新了視頻檢索方式 —— 僅需輸入一句話、一個(gè)詞,即可秒級(jí)定位目標(biāo)。本文將從硬件配置、功能、性能及場(chǎng)景應(yīng)用等方面,深度剖析這款產(chǎn)品的智能化突破。
硬件實(shí)力加持,智能化再升級(jí)
??低暰W(wǎng)絡(luò)硬盤(pán)錄像機(jī)(下稱海康威視文搜系列 NVR)從外觀設(shè)計(jì)和硬件性能上來(lái)說(shuō),繼承了其堅(jiān)固耐用的外觀特色和優(yōu)越的硬件配置,集 IPC 接入、存儲(chǔ)、管理、控制、智能分析于一體。
從接入能力來(lái)說(shuō),其支持最高 3200W 像素高清網(wǎng)絡(luò)視頻的預(yù)覽、存儲(chǔ)、回放,支持即時(shí)回放功能,在預(yù)覽畫(huà)面下對(duì)指定通道的當(dāng)前錄像進(jìn)行回放,并且不影響其他通道預(yù)覽。實(shí)測(cè)可以同步解碼 32 路 1080P 視頻流無(wú)延遲,支持 16 路同步回放與多路倒放,滿足復(fù)雜事件追溯需求。
從穩(wěn)健存儲(chǔ)能力上來(lái)說(shuō),支持 8 個(gè) SATA 接口,1 個(gè) eSATA 接口,單盤(pán)最大容量 20TB,總存儲(chǔ)容量可達(dá) 160TB。支持硬盤(pán)配額和硬盤(pán)盤(pán)組兩種存儲(chǔ)模式,可對(duì)不同通道分配不同的錄像保存容量或周期。RAID+ 熱備,讓數(shù)據(jù)安全無(wú)憂,實(shí)測(cè)中,模擬 8 路 4K 視頻連續(xù)錄制 72 小時(shí),開(kāi)啟 RAID5 陣列與全局熱備。硬盤(pán)掉線后自動(dòng)切換至備用盤(pán),業(yè)務(wù)中斷時(shí)間 <1 秒,同時(shí)重要錄像文件加鎖保護(hù)功能有效防止誤刪。
從智能分析能力來(lái)說(shuō),通過(guò)大小模型蒸餾、混合精度量化等技術(shù),在輕量化硬件(雙千兆網(wǎng)卡)上實(shí)現(xiàn)多模態(tài)大模型的實(shí)時(shí)推理。
??低曃乃严盗?NVR 可以說(shuō)是一款性能配置非常優(yōu)越的智能 NVR 產(chǎn)品了。
軟件生態(tài)優(yōu)勢(shì) 檢索方式多樣化
??低曃乃严盗?NVR 采用嵌入式設(shè)計(jì),集成 GPU 模塊,內(nèi)嵌深度學(xué)習(xí)算法,支持智能文搜、目標(biāo)識(shí)別、視頻結(jié)構(gòu)化等智能分析功能。該機(jī)非常適用于需要實(shí)時(shí)監(jiān)控和快速檢索的場(chǎng)景,它能夠在本地網(wǎng)絡(luò)中高效處理和分析視頻數(shù)據(jù),提供高效的視頻監(jiān)控和管理解決方案。
文本檢索框,一鍵直達(dá)
該 NVR 界面設(shè)置有智能文搜選項(xiàng),一鍵即可直達(dá)搜索位置。在實(shí)測(cè)中,用戶根據(jù)需求,在搜索框內(nèi)輸入文字描述(一句話或一個(gè)詞等),例如輸入“打電話”“白色面包車”“騎電瓶車未戴頭盔”“自行車”“小推車”“小狗”等開(kāi)放文字語(yǔ)義描述,即可搜索出相關(guān)目標(biāo)。操作簡(jiǎn)單,技術(shù)門(mén)檻低,速度快,實(shí)現(xiàn)秒級(jí)響應(yīng)。
文搜+圖搜 快速定位目標(biāo)
??低曃乃严盗?NVR 基于多模態(tài)大模型技術(shù)體系,實(shí)現(xiàn)了自然語(yǔ)言與視頻圖像的跨模態(tài)信息檢索。通過(guò)將大參數(shù)量、大樣本量的圖文多模態(tài)大模型與嵌入式智能硬件深度融合,使得文搜 NVR 能夠在秒級(jí)時(shí)間內(nèi)檢索到目標(biāo)圖像?。
在實(shí)際測(cè)試中,先通過(guò)文字搜索,快速定位目標(biāo),通過(guò)定位到的圖片,進(jìn)行圖片搜索實(shí)現(xiàn)精準(zhǔn)識(shí)別。
多樣化檢索方式
海康威視文搜系列 NVR 支持特征描述檢索,還支持模糊語(yǔ)義檢索,可以在海量視圖數(shù)據(jù)中進(jìn)行開(kāi)放式語(yǔ)義檢索,搜索范圍廣泛,除了手動(dòng)輸入文本進(jìn)行檢索外,貼合用戶常用情景,增設(shè)找人、找機(jī)動(dòng)車、找非機(jī)動(dòng)車、找寵物、找常用物品等快捷搜索,還支持特定物品、異常行為等特征搜索?。支持用戶自定義編輯搜索慣語(yǔ),以“文字語(yǔ)義描述”快速檢索目標(biāo),使得操作更加簡(jiǎn)單便捷??梢哉f(shuō),??低曃乃严盗? NVR 全新的搜索方式,給用戶帶來(lái)了前所未有的便捷體驗(yàn)。
前后端智能協(xié)同 實(shí)現(xiàn)快速應(yīng)用
??低曃乃严盗?NVR 前后智能協(xié)同,搭配前端智搜相機(jī),快速提取圖像與搜索語(yǔ)言的特征,實(shí)現(xiàn)高精度快速檢索,解決普通 NVR 多路高清流處理與實(shí)時(shí)告警的算力瓶頸問(wèn)題。針對(duì)此外,采用數(shù)據(jù)三級(jí)緩存、均衡抽樣、異步加載等技術(shù),實(shí)現(xiàn)文本搜索結(jié)果的秒級(jí)顯示?。
目標(biāo)分析:搭配抓拍機(jī)或高清相機(jī),對(duì)圖片中目標(biāo)進(jìn)行智能建模和分析,實(shí)現(xiàn)多樣化應(yīng)用,通過(guò)目標(biāo)庫(kù)比對(duì)實(shí)現(xiàn)常規(guī)報(bào)警、陌生人報(bào)警、簽到與考勤等,通過(guò)特征搜圖、按屬性檢索等實(shí)現(xiàn)目標(biāo)人員的快速查找。
周界防范:實(shí)時(shí)動(dòng)態(tài)分析視頻碼流,對(duì)穿越警戒線或闖入警戒區(qū)域的目標(biāo)進(jìn)行抓拍,利用深度學(xué)習(xí)算法對(duì)圖片進(jìn)行目標(biāo)識(shí)別,判定目標(biāo)是否為人員或者其他物體,過(guò)濾掉樹(shù)葉、燈光、動(dòng)物、陰影等無(wú)效目標(biāo),對(duì)于由有效目標(biāo)觸發(fā)的行為,系統(tǒng)自動(dòng)產(chǎn)生報(bào)警。
視頻結(jié)構(gòu)化:搭配高清 IPC,可基于視頻流對(duì)人、車等目標(biāo)進(jìn)行結(jié)構(gòu)化分析,實(shí)現(xiàn)按屬性檢索以及特征搜圖。
助推大模型的普惠 引爆百億級(jí)市場(chǎng)
??蛋l(fā)布基于多模態(tài)大模型的文搜存儲(chǔ)系列產(chǎn)品,對(duì)安防行業(yè)來(lái)說(shuō)將是一次革命性的變化。
安防廠商一直在努力推動(dòng) AI 技術(shù)的落地應(yīng)用,跟隨人工智能的發(fā)展而發(fā)展,從小模型到大模型,從視覺(jué)大模型到視覺(jué)與語(yǔ)言結(jié)合的多模態(tài)大模型。此次文搜產(chǎn)品的問(wèn)世,為端側(cè) AI 的發(fā)展提供了新的范式,作為視頻監(jiān)控的核心設(shè)備,NVR 是應(yīng)用最廣泛的安防民用產(chǎn)品,包括大小企業(yè)園區(qū)、工廠、政府單位,甚至是沿街的小商鋪。大模型成功嵌入 NVR,標(biāo)志著大模型特別是多模態(tài)大模型嵌入的端側(cè)設(shè)備已具備規(guī)?;佋O(shè)的能力。這就意味著技術(shù)的拐點(diǎn)將迎來(lái)更大市場(chǎng)的激活,安防行業(yè)將經(jīng)此打開(kāi)新的增長(zhǎng)空間,迎來(lái)新的市場(chǎng)機(jī)會(huì)。
不僅如此,輕量化方案也會(huì)使應(yīng)用場(chǎng)景更廣泛。海康威視文搜 NVR 系列產(chǎn)品是多模態(tài)大模型算法與嵌入式智能硬件結(jié)合的應(yīng)用突破,通過(guò)面向平臺(tái)的模型設(shè)計(jì)、大小模型蒸餾、跨層混合精度量化等大模型部署技術(shù)與嵌入式智能硬件創(chuàng)新設(shè)計(jì),實(shí)現(xiàn)多模態(tài)大模型在輕量化嵌入式硬件平臺(tái)上落地,讓多模態(tài)大模型技術(shù)實(shí)現(xiàn)普惠應(yīng)用,使更多行業(yè)和用戶享受大模型帶來(lái)的智能與便捷。
產(chǎn)品既可作為 NVR 進(jìn)行本地獨(dú)立工作,也可聯(lián)網(wǎng)組成一個(gè)強(qiáng)大的安全防范系統(tǒng),可廣泛應(yīng)用于金融、公安、電信、交通、電力、教育、水利等領(lǐng)域的安全防范。與業(yè)內(nèi)幾十萬(wàn)、幾百萬(wàn)的大模型部署費(fèi)用相比,NVR 是萬(wàn)元、千元級(jí)別的產(chǎn)品,具備極高性價(jià)比,也將真正助推大模型普惠的實(shí)現(xiàn),預(yù)計(jì)將逐步引爆百億級(jí)市場(chǎng)。
a&s點(diǎn)評(píng)
??低曃乃严盗?NVR 產(chǎn)品特色包括:
1、硬件設(shè)計(jì)的高繼承性,集 IPC 接入、存儲(chǔ)、管理、控制、智能分析于一體。
2、支持視頻結(jié)構(gòu)化功能,可對(duì)視頻流中人體、車輛等目標(biāo)進(jìn)行結(jié)構(gòu)化分析。
3、檢索方式多樣化,支持模糊語(yǔ)義搜索、特征描述搜索、開(kāi)放式語(yǔ)義檢索,搭配前端智搜相機(jī)輸入文字即可對(duì)設(shè)備視頻錄像中的目標(biāo)實(shí)現(xiàn)快速檢索。
4、產(chǎn)品系列齊全,用戶方案可選空間大,更具靈活性。
憑借多模態(tài)大模型+輕量化硬件的雙重突破,實(shí)現(xiàn)了從“看懂視頻”到“理解需求”的躍遷。其開(kāi)放式語(yǔ)義檢索、秒級(jí)響應(yīng)速度與極簡(jiǎn)操作界面,不僅解決了傳統(tǒng)安防檢索效率低、門(mén)檻高的痛點(diǎn),通過(guò)?端側(cè)分析+云端備份?兼顧隱私合規(guī)與容災(zāi),更是填補(bǔ)了中小規(guī)模場(chǎng)景專業(yè)化安防空白。以?高性價(jià)比智能融合?為核心,推動(dòng)輕量級(jí)安防從“單一存儲(chǔ)”向“感知-決策”的一體化升級(jí)。
當(dāng)一句自然語(yǔ)言就能喚醒安防系統(tǒng)的“智慧”,文搜 NVR 不僅是技術(shù)的迭代,更將是用戶體驗(yàn)的革命。