在智能交通與公共安全領(lǐng)域,事件檢測(cè)系統(tǒng)的準(zhǔn)確性直接關(guān)系到應(yīng)急響應(yīng)的效率與人民生命財(cái)產(chǎn)的安全。
近日,協(xié)會(huì)常務(wù)理事單位武漢微創(chuàng)光電股份有限公司事件檢測(cè)平臺(tái)在原有AI算法基礎(chǔ)上,引入視覺(jué)大模型技術(shù),構(gòu)建“事件二次復(fù)核系統(tǒng)”,實(shí)現(xiàn)對(duì)復(fù)雜場(chǎng)景下異常事件的精準(zhǔn)識(shí)別與誤報(bào)過(guò)濾,整體誤報(bào)率降低超過(guò)80%,標(biāo)志著事件檢測(cè)從“看得見(jiàn)”邁向“看得懂”的新階段。
微創(chuàng)光電事件檢測(cè)平臺(tái)長(zhǎng)期致力于對(duì)高速公路場(chǎng)景中的異常事件進(jìn)行實(shí)時(shí)監(jiān)測(cè),涵蓋停車(chē)、逆行、行人、擁堵、拋灑物、摩托車(chē)、事故、施工、煙火、邊坡塌方、惡劣天氣等十余類(lèi)事件類(lèi)型。
盡管整體檢測(cè)準(zhǔn)確率已達(dá)95%,但部分事件因發(fā)生概率低、形態(tài)復(fù)雜、環(huán)境干擾強(qiáng),識(shí)別難度較大,成為制約系統(tǒng)整體性能提升的關(guān)鍵瓶頸。
煙火事件
真實(shí)樣本稀缺,煙火形態(tài)不規(guī)則,易與車(chē)燈、霧氣、云朵混淆
邊坡塌方
發(fā)生頻率低,訓(xùn)練數(shù)據(jù)不足,模型泛化能力弱

拋灑物
目標(biāo)形態(tài)多樣,受光照、陰影影響大

惡劣天氣
畫(huà)質(zhì)模糊、視角受限,傳統(tǒng)算法難以準(zhǔn)確判斷。
這些問(wèn)題導(dǎo)致傳統(tǒng)AI算法在處理上述事件時(shí),誤報(bào)率高、識(shí)別率低,難以滿(mǎn)足實(shí)際應(yīng)用需求。
為突破傳統(tǒng)算法瓶頸,微創(chuàng)光電事件檢測(cè)平臺(tái)引入視覺(jué)大模型技術(shù),構(gòu)建“事件二次復(fù)核系統(tǒng)”,實(shí)現(xiàn)對(duì)初檢結(jié)果的智能復(fù)核與誤報(bào)過(guò)濾。
該系統(tǒng)以開(kāi)源視覺(jué)大模型為基礎(chǔ),結(jié)合平臺(tái)多年積累的事件圖像數(shù)據(jù),采用LORA微調(diào)技術(shù)進(jìn)行定向優(yōu)化,使模型具備更強(qiáng)的場(chǎng)景理解與推理能力。
當(dāng)系統(tǒng)首次檢測(cè)到疑似事件時(shí),會(huì)自動(dòng)截取關(guān)鍵圖像,發(fā)送至視覺(jué)大模型進(jìn)行復(fù)核。大模型通過(guò)全局圖像分析與多維度推理,判斷事件真?zhèn)危⒔Y(jié)果反饋至原系統(tǒng),顯著提升檢測(cè)準(zhǔn)確率。
以“邊坡塌方”為例,系統(tǒng)不僅能識(shí)別路面碎石,還能結(jié)合地形、環(huán)境、物體分布等因素,綜合判斷是否存在塌方風(fēng)險(xiǎn),避免將普通土堆誤判為塌方事件。
在多項(xiàng)對(duì)比測(cè)試中,視覺(jué)大模型在復(fù)雜事件識(shí)別任務(wù)中表現(xiàn)優(yōu)異:
煙火識(shí)別:傳統(tǒng)算法正檢率僅為59.2%,而視覺(jué)大模型提升至96.1%,誤報(bào)率降至3.9%;
邊坡塌方識(shí)別:傳統(tǒng)算法正檢率為89.8%,視覺(jué)大模型最高達(dá)99.8%;
拋灑物識(shí)別:傳統(tǒng)算法負(fù)樣本識(shí)別率為85.8%,視覺(jué)大模型提升至92.4%;
行人、摩托車(chē)等常規(guī)事件:視覺(jué)大模型在保持高準(zhǔn)確率的同時(shí),具備更強(qiáng)的泛化能力。
此外,視覺(jué)大模型在推理速度上也表現(xiàn)出色,單張圖像處理時(shí)間控制在0.3秒至1秒之間,滿(mǎn)足實(shí)時(shí)檢測(cè)需求。
在實(shí)際部署中,事件二次復(fù)核系統(tǒng)展現(xiàn)出強(qiáng)大的誤報(bào)過(guò)濾能力。通過(guò)對(duì)傳統(tǒng)算法檢測(cè)結(jié)果的二次分析,系統(tǒng)成功過(guò)濾了包括鏡頭模糊、燈光干擾、車(chē)輛揚(yáng)塵、云彩遮擋等在內(nèi)的多種誤報(bào)場(chǎng)景,誤報(bào)過(guò)濾率超過(guò)90%。
邊坡塌方誤報(bào):路側(cè)土坯被誤判為塌方,經(jīng)大模型復(fù)核后過(guò)濾;
惡劣天氣誤報(bào):夜間模式下的雪花、雨滴被誤判為異常,經(jīng)大模型識(shí)別后排除;
煙火誤報(bào):隧道燈光被誤認(rèn)為火源,經(jīng)大模型分析后準(zhǔn)確過(guò)濾。
這一機(jī)制不僅減輕了人工審核壓力,也大幅提升了事件檢測(cè)系統(tǒng)的實(shí)用性與可靠性。
微創(chuàng)光電事件檢測(cè)平臺(tái)表示,視覺(jué)大模型的引入是平臺(tái)智能化升級(jí)的重要一步。
未來(lái),平臺(tái)將持續(xù)優(yōu)化模型結(jié)構(gòu),拓展訓(xùn)練數(shù)據(jù),提升模型對(duì)更多復(fù)雜場(chǎng)景的適應(yīng)能力。同時(shí),平臺(tái)也將探索大模型在事件預(yù)測(cè)、趨勢(shì)分析等更高層次的應(yīng)用,構(gòu)建“感知-理解-預(yù)測(cè)”一體化的智能交通事件管理體系。
在AI技術(shù)不斷演進(jìn)的今天,微創(chuàng)光電事件檢測(cè)平臺(tái)正以更開(kāi)放的姿態(tài),擁抱大模型時(shí)代,用“看得懂”的智慧之眼,守護(hù)每一條道路的安全與暢通。