為提升車(chē)載設(shè)備駕駛員主動(dòng)安全告警準(zhǔn)確率，4月初，中移物聯(lián)網(wǎng)有限公司（以下簡(jiǎn)稱“中移物聯(lián)”）引入AI多模態(tài)大模型技術(shù)，對(duì)行車(chē)衛(wèi)士系統(tǒng)完成功能二次升級(jí)。本次升級(jí)對(duì)行車(chē)衛(wèi)士設(shè)備上報(bào)的告警進(jìn)行二次過(guò)濾，通過(guò)AI模型對(duì)司機(jī)抽煙、接打電話等誤報(bào)率高的行為圖片進(jìn)行智能分析，自動(dòng)攔截?zé)o效告警信息。系統(tǒng)上線一周后，首批試用企業(yè)的結(jié)果顯示，誤報(bào)率顯著降低，管理效率大幅提升。
傳統(tǒng)告警誤報(bào)泛濫 管理效能遇瓶頸
長(zhǎng)期以來(lái)，傳統(tǒng)車(chē)載安全告警設(shè)備面臨著一個(gè)棘手的難題——誤報(bào)泛濫。由于環(huán)境干擾或動(dòng)作誤判，設(shè)備常常會(huì)發(fā)出錯(cuò)誤告警信號(hào)。
部分設(shè)備誤報(bào)場(chǎng)景展示
例如，光線反射可能被誤判為司機(jī)手持香煙，物品抓取動(dòng)作被誤判為接打電話。在未接入多模態(tài)大模型過(guò)濾前，設(shè)備上報(bào)數(shù)據(jù)中誤報(bào)數(shù)量竟高達(dá)一半以上。這些大量無(wú)效的告警不僅增加了企業(yè)的人工核查成本，還可能干擾對(duì)真實(shí)風(fēng)險(xiǎn)的及時(shí)處理，嚴(yán)重制約了管理效能的提升。
AI多模態(tài)大模型雙重校驗(yàn) 精準(zhǔn)過(guò)濾誤報(bào)
此次行車(chē)衛(wèi)士系統(tǒng)升級(jí)，核心亮點(diǎn)在于深度應(yīng)用AI多模態(tài)大模型。當(dāng)車(chē)載設(shè)備觸發(fā)告警后，系統(tǒng)會(huì)將告警圖片上傳至云端多模態(tài)大模型進(jìn)行二次分析。通過(guò)模型的圖像識(shí)別技術(shù)，結(jié)合大量真實(shí)場(chǎng)景數(shù)據(jù)的訓(xùn)練成果，對(duì)告警的真實(shí)性進(jìn)行精準(zhǔn)判斷。
過(guò)濾流程示意圖
例如，在疑似抽煙告警中，模型會(huì)分析是否有煙霧、手持物品的形態(tài)是否與香煙匹配；在接打電話告警中，模型會(huì)檢測(cè)設(shè)備與耳部的關(guān)系以及肢體動(dòng)作的關(guān)聯(lián)性。只有經(jīng)過(guò)雙重校驗(yàn)確認(rèn)為有效的告警，才會(huì)推送至管理平臺(tái)，無(wú)效告警則被自動(dòng)攔截。
升級(jí)成果顯著 攔截75%的誤報(bào)
自系統(tǒng)升級(jí)上線一周以來(lái)，首批試用企業(yè)的結(jié)果反饋顯示，系統(tǒng)成功過(guò)濾超過(guò)75%的誤告警，誤報(bào)率顯著降低，管理效率大幅提升。目前，中移物聯(lián)已將未正確識(shí)別的誤報(bào)與誤攔截案例納入模型優(yōu)化樣本庫(kù)，后期將開(kāi)展新一輪的微調(diào)和測(cè)試，希望通過(guò)增量訓(xùn)練，進(jìn)一步提升模型的準(zhǔn)確率。
下一階段，中移物聯(lián)將從兩方面推進(jìn)提高算法性能，一方面推進(jìn)傳統(tǒng)CV算法與大模型語(yǔ)義理解能力的深度融合，聯(lián)合識(shí)別方案已在測(cè)試中展現(xiàn)出更優(yōu)性能，計(jì)劃通過(guò)短期迭代實(shí)現(xiàn)算法效能的突破性升級(jí)；另一方面積極探索模型微調(diào)與強(qiáng)化學(xué)習(xí)等技術(shù)路徑，當(dāng)前技術(shù)驗(yàn)證已取得初步進(jìn)展，但方法的穩(wěn)定性與跨場(chǎng)景泛化能力仍需通過(guò)多維度測(cè)試持續(xù)優(yōu)化，后續(xù)將結(jié)合驗(yàn)證結(jié)果制定漸進(jìn)式落地方案。
行車(chē)衛(wèi)士智能告警系統(tǒng)的升級(jí)，是技術(shù)創(chuàng)新道路上的一次重要跨越。相信不遠(yuǎn)的未來(lái)，中移物聯(lián)能憑借多模態(tài)大模型的力量，助力車(chē)載安全告警邁向一個(gè)全新的精準(zhǔn)化時(shí)代。 
