楊櫻

摘要：通過研究和融合熱成像及可見光雙模融合檢測(cè)技術(shù)、深度學(xué)習(xí)全息車輛感知與信息采集技術(shù)、視頻智能交通監(jiān)測(cè)與預(yù)警技術(shù)、視頻智能交通違法監(jiān)測(cè)與取證技術(shù)和增強(qiáng)學(xué)習(xí)與機(jī)器學(xué)習(xí)技術(shù)，文章研發(fā)車輛超溫監(jiān)測(cè)預(yù)警事件檢測(cè)系統(tǒng)，通過對(duì)超過安全溫度但并未達(dá)燃燒值的車輛車身、貨箱及部分前輪和后輪的溫度變化，從而實(shí)現(xiàn)對(duì)車輛超溫危險(xiǎn)預(yù)警，實(shí)現(xiàn)對(duì)道路交通事件和火災(zāi)事件的檢測(cè)，有效避免燃爆類惡性事故。

關(guān)鍵詞：車輛超溫監(jiān)測(cè)預(yù)警；安全監(jiān)管；重點(diǎn)車輛監(jiān)控

中圖分類號(hào)：TP399? 文獻(xiàn)標(biāo)志碼：A

1 項(xiàng)目背景

常泰長江智慧大橋位于泰州長江大橋下游30.2km、江陰長江大橋上游28.5km，南北分別連接常州與泰興。常泰長江智慧大橋采用城際鐵路、高速公路、一級(jí)公路3種交通方式合并過江方案，項(xiàng)目上層橋面布置雙向6車道高速公路，南接江宜高速，北接寧通高速，設(shè)計(jì)速度100km/h；下層橋面上游側(cè)布置兩線城際鐵路，設(shè)計(jì)速度200km/h；下層橋面下游側(cè)布置4車道一級(jí)公路，泰興側(cè)接入六圩港大道，常州側(cè)接入港區(qū)大道，設(shè)計(jì)速度80km/h。復(fù)雜的橋梁結(jié)構(gòu)和多種形態(tài)的通行方式使得大橋?qū)Φ缆愤\(yùn)行過程中的安全防控要求更高。常泰長江智慧大橋具有以下特點(diǎn)：（1）集3種交通運(yùn)輸方式于一體的多功能橋梁；（2）長江大橋下層，一邊是雙線鐵軌，一邊是四車道公路，鐵路偏重，整座橋存在荷載不平衡的問題，也被稱為“偏心橋”；（3）管理難度大，安全風(fēng)險(xiǎn)隱患大。

現(xiàn)有高速公路監(jiān)控系統(tǒng)建設(shè)比較完備，以五峰山大橋?yàn)槔?，主要包括交通事件檢測(cè)、交通管理、交通參數(shù)采集、信息發(fā)布、外場(chǎng)監(jiān)控設(shè)備的供電、車道管控、全數(shù)字BIM+GIS管養(yǎng)、智能消冰除雪、護(hù)欄碰撞感知、危險(xiǎn)駕駛行為檢測(cè)、交通事件急速感知、交通事故智能取證等系統(tǒng)。在道路運(yùn)行安全方面從道路通行狀態(tài)監(jiān)測(cè)、氣象感知、交通事件監(jiān)控、車道管控、信息發(fā)布、路面消冰、護(hù)欄碰撞感知、危險(xiǎn)駕駛行為檢測(cè)和基于雷達(dá)的事件感知幾個(gè)方面，實(shí)現(xiàn)了對(duì)高速大橋的路面行駛過程安全監(jiān)測(cè)。南部通道監(jiān)控系統(tǒng)也實(shí)現(xiàn)了對(duì)危險(xiǎn)品車輛定位的實(shí)時(shí)監(jiān)控，但是數(shù)據(jù)延時(shí)較大，無法通過數(shù)據(jù)實(shí)現(xiàn)對(duì)危險(xiǎn)品車輛的實(shí)時(shí)監(jiān)控，尚存在對(duì)火災(zāi)和車輛超溫預(yù)警能力不足。特別是在高溫天氣中，載重車輛高速行駛會(huì)帶來車輛燃燒等事故。急需部署車輛超溫預(yù)警系統(tǒng)［1］有效檢測(cè)出已經(jīng)超過安全溫度但并未達(dá)燃燒值的車輛車身、貨箱及部分前輪和后輪的溫度變化，有效避免燃爆類惡性事故。

車輛超溫監(jiān)測(cè)預(yù)警系統(tǒng)的監(jiān)測(cè)點(diǎn)硬件設(shè)置在長大下坡的中下段，橋梁或隧道前的1～2km處；監(jiān)測(cè)點(diǎn)的前端測(cè)溫采集系統(tǒng)采用雙波段紅外測(cè)溫能有效檢測(cè)出已經(jīng)超過安全溫度但并未達(dá)燃燒值的車輛車身、貨箱及部分前輪和后輪的溫度變化。

車輛超溫監(jiān)測(cè)預(yù)警包括前端子系統(tǒng)、傳輸子系統(tǒng)、后端平臺(tái)。前端子系統(tǒng)實(shí)現(xiàn)對(duì)車輛特征數(shù)據(jù)、車輛溫度數(shù)據(jù)的提取以及對(duì)超溫車輛的預(yù)警、車輛軌跡跟蹤接力。通過傳輸子系統(tǒng)將各前端設(shè)備間獲取的數(shù)據(jù)打通，并按需傳輸?shù)胶蠖似脚_(tái)子系統(tǒng)，實(shí)現(xiàn)各類數(shù)據(jù)的匯聚、分析、展現(xiàn)、存儲(chǔ)等功能。通過3個(gè)子系統(tǒng)的建設(shè)和互聯(lián)互通，車輛超溫預(yù)警前端系統(tǒng)由熱成像溫度檢測(cè)單元、卡口抓拍單元、終端服務(wù)器、交通警示誘導(dǎo)屏、警示音柱、爆閃燈組成，主要實(shí)現(xiàn)行經(jīng)車輛的溫度檢測(cè)、車輛車牌提取、超溫車輛的聲光警示等。

熱成像溫度檢測(cè)單元，以可見光與熱成像雙光譜融合視頻事件檢測(cè)和圖像結(jié)構(gòu)化分析技術(shù)為基礎(chǔ)，基于視覺感知、深度學(xué)習(xí)等技術(shù)，實(shí)時(shí)感知車輛、行人、非機(jī)動(dòng)車、速度、方向、異常軌跡信息，結(jié)合道路基礎(chǔ)設(shè)施、設(shè)備運(yùn)行狀態(tài)感知，為道路管理方提供實(shí)時(shí)、準(zhǔn)確、全面的綜合交通信息，是未來真正實(shí)現(xiàn)智慧道路、智慧交通的基礎(chǔ)性工程。

2 關(guān)鍵技術(shù)及特點(diǎn)

2.1 熱成像雙光譜檢測(cè)技術(shù)

通過雙光譜熱成像技術(shù)解決了可見光技術(shù)在夜間及復(fù)雜環(huán)境中看得見的問題，將兩種進(jìn)行融合應(yīng)用相得益彰，特別是在強(qiáng)光干擾、夜間、霧天等復(fù)雜環(huán)境下，雙光譜技術(shù)采用深度圖像特征識(shí)別與熱成像圖像模型可實(shí)現(xiàn)對(duì)白天和晚上交通事件的檢測(cè)，可充分提高事件檢測(cè)系統(tǒng)的環(huán)境適應(yīng)性和實(shí)用性。

圖像中對(duì)于人、車等強(qiáng)紅外輻射源，圖像亮度高，而路面、水面及其他環(huán)境則溫度較低則圖像背景變暗，因此，對(duì)于監(jiān)控場(chǎng)景中的感興趣目標(biāo)具有天然的選擇性，不容易受到陰影、逆光、順光、車輛炫光等復(fù)雜光線的干擾。

雙光譜熱成像技術(shù)采用的紅外波長較長，穿透煙霧、污漬能力強(qiáng)，特別在薄霧和中霧環(huán)境下對(duì)雙光譜熱成像幾乎不造成任何影響，同時(shí)衍射能力強(qiáng)，在鏡頭上有污漬或鏡頭前方出現(xiàn)部分遮擋情況下，對(duì)成像效果不造成影響，易于維護(hù)，安裝條件限制也較少。采用雙光譜熱成像技術(shù)無須外界自然光源、人工光源的輔助即可獲得良好的成像效果。

2.2 深度學(xué)習(xí)全息車輛感知技術(shù)

通過基于深度學(xué)習(xí)目標(biāo)識(shí)別和全時(shí)空三層坐標(biāo)映射算法，識(shí)別車輛目標(biāo)，實(shí)現(xiàn)對(duì)車輛、行人、物體的真實(shí)大小、地理坐標(biāo)的實(shí)時(shí)感知、分析和軌跡采集與記錄。

通過圖像抓拍與智能識(shí)別技術(shù)，自動(dòng)識(shí)別車輛特征并建立跟蹤軌跡，系統(tǒng)不僅能夠?qū)崿F(xiàn)對(duì)道路目標(biāo)及設(shè)施的實(shí)時(shí)狀態(tài)感知，還能夠?qū)ζ湔鎸?shí)坐標(biāo)位置、行駛方向、正方向夾角、速度等進(jìn)行感知。

2.3 視頻智能交通監(jiān)測(cè)與預(yù)警技術(shù)

在深度學(xué)習(xí)技術(shù)基礎(chǔ)上，實(shí)現(xiàn)事件的自動(dòng)上報(bào)，同時(shí)為道路上行駛的車輛提供預(yù)警指導(dǎo)，降低二次事故和三次事故發(fā)生概率。

2.4 增強(qiáng)學(xué)習(xí)與機(jī)器學(xué)習(xí)技術(shù)

通過增強(qiáng)學(xué)習(xí)與機(jī)器學(xué)習(xí)技術(shù)提高事件識(shí)別的準(zhǔn)確性和智能化水平，不斷完善和升級(jí)事件識(shí)別算法，提升在不同場(chǎng)景下的系統(tǒng)識(shí)別能力和適應(yīng)能力。

3 系統(tǒng)架構(gòu)

拓?fù)浼軜?gòu)：本系統(tǒng)的組成由前端傳感器、雙光譜AI交通事件檢測(cè)器，以及后端平臺(tái)應(yīng)用服務(wù)器、工作站、顯示系統(tǒng)等構(gòu)成。其中，雙光譜圖像前端傳感器采用不低于200萬像素的可見光高清、高靈敏度、低照度攝像機(jī)和在線式紅外熱成像儀。系統(tǒng)可支持全天候?qū)λ淼?、路面、橋梁等多?chǎng)景、多區(qū)域的交通視頻圖像采集和上傳。

雙光譜AI交通事件檢測(cè)器，通過CPU、GPU并行運(yùn)算架構(gòu)，采用深度學(xué)習(xí)、強(qiáng)化學(xué)習(xí)等技術(shù)，將前端上傳的視頻流進(jìn)行分析，并將交通事件、交通違法情況輸出到應(yīng)用平臺(tái)和工作站。

應(yīng)用平臺(tái)由數(shù)據(jù)采集服務(wù)器、數(shù)據(jù)庫服務(wù)器、Web應(yīng)用服務(wù)器、應(yīng)用客戶端以及監(jiān)控系統(tǒng)大屏幕等主要設(shè)備構(gòu)成。采集服務(wù)器主要實(shí)現(xiàn)對(duì)感知數(shù)據(jù)的采集、記錄、數(shù)據(jù)調(diào)度服務(wù)。數(shù)據(jù)庫服務(wù)器實(shí)現(xiàn)對(duì)各感知數(shù)據(jù)的入庫和分析。Web應(yīng)用服務(wù)器主要基于Web頁面的交通事件應(yīng)用平臺(tái)提供支撐。客戶端是? 提供業(yè)務(wù)應(yīng)用人員與應(yīng)用平臺(tái)系統(tǒng)應(yīng)用層的交互入口。大屏幕主要負(fù)責(zé)輸出和事件報(bào)警稽查的最終界面成果展示。

4 系統(tǒng)功能

系統(tǒng)功能主要包括車輛識(shí)別、雙光譜檢測(cè)預(yù)警和交通事件檢測(cè)的功能。

4.1 車輛識(shí)別

通過對(duì)車輛檢測(cè)、車輛品牌年款識(shí)別、車輛特征識(shí)別、車輛比對(duì)、車牌識(shí)別，實(shí)現(xiàn)對(duì)采集車輛的身份認(rèn)證，確定車輛基本信息。

4.1.1 車輛檢測(cè)

通過前端卡口設(shè)備，采集車輛視頻圖像并進(jìn)行圖像智能識(shí)別分析，確認(rèn)是否有車及其位置，其難點(diǎn)在于針對(duì)不同的路況、不同的姿態(tài)、不同的光線、嚴(yán)重的遮擋等復(fù)雜情況［2］識(shí)別出車輛及其位置。同時(shí)，對(duì)于圖像中的司乘人員人臉清晰的，進(jìn)行人臉識(shí)別［3］以輔助車輛的識(shí)別。

4.1.2 車輛品牌年款識(shí)別

對(duì)常見的超過200種車輛品牌，7 000種車輛款式及子車型的車輛目標(biāo)進(jìn)行身份識(shí)別，包括車輛的號(hào)牌、顏色、品牌等，有效識(shí)別率不低于96%［4］。

4.1.3 車輛特征識(shí)別

針對(duì)車輛的年檢標(biāo)、擺件、掛件、出入證、抽紙盒、天窗、備胎、輪轂、車燈，車輛駕駛員等微特征進(jìn)行識(shí)別，同時(shí)對(duì)車輛中是否有副駕駛、主副駕駛系安全帶情況、主駕是否打電話、是否倒下遮陽板、駕駛員人臉等關(guān)鍵點(diǎn)進(jìn)行檢測(cè)及特征識(shí)別達(dá)到車輛輔助判別的目標(biāo)。

4.1.4 車輛比對(duì)

車輛比對(duì)指的是在進(jìn)行車輛識(shí)別之后，對(duì)車輛進(jìn)行1∶1的比對(duì)，1∶N的比對(duì)，判別車輛是否套牌，鑒定無牌車是否違法等。

4.1.5 車牌識(shí)別

可準(zhǔn)確識(shí)別車牌號(hào)碼，包括號(hào)牌中的漢字、英文字母以及阿拉伯?dāng)?shù)字等常見字符以及車牌顏色、車牌底色、車牌類型、車牌結(jié)構(gòu)等，實(shí)現(xiàn)車輛類型［4］區(qū)分，可以支持部分車牌識(shí)別、遮擋號(hào)牌車輛識(shí)別。

4.2 雙光譜檢測(cè)預(yù)警

4.2.1 雙光譜異常交通行為分析

基于熱成像和可見光傳感器的連續(xù)視頻流進(jìn)行車輛軌跡和行為實(shí)時(shí)跟蹤分析，進(jìn)而實(shí)現(xiàn)車輛的異常停車、逆行、違法、發(fā)生交通事故等行為分析。

4.2.2 車體溫度預(yù)警

通過安裝在龍門架上的熱成像攝像機(jī)，采集熱紅外波段監(jiān)測(cè)車輛溫度，如出現(xiàn)異常高溫（超過160℃），高速監(jiān)控中心會(huì)第一時(shí)間收到預(yù)警信息，系統(tǒng)還會(huì)顯示抓拍的車牌號(hào)碼、過車圖片、熱感圖片、錄像等信息。

監(jiān)控中心即可立刻通過高速公路上的情報(bào)板發(fā)布預(yù)警信息，引導(dǎo)車輛進(jìn)入前方的服務(wù)區(qū)或下高速，查看檢修或熄火降溫，有效避免道路車輛自燃事故發(fā)生，減少道路事故發(fā)生率，提升道路通行效率。

4.2.3 火焰檢測(cè)

系統(tǒng)對(duì)大橋上發(fā)生的火災(zāi)事故中的火焰進(jìn)行準(zhǔn)確的檢測(cè)和報(bào)警，達(dá)到準(zhǔn)確火災(zāi)預(yù)警的效果。

4.3 交通事件檢測(cè)功能

系統(tǒng)對(duì)大橋高速交通區(qū)域的異常交通事件進(jìn)行自動(dòng)檢測(cè)、自動(dòng)報(bào)警、實(shí)時(shí)記錄，包括異常停車、低速車流、超速車輛、排隊(duì)超限、車輛逆行、能見度異常、行人穿越、路面遺撒等交通事件。

中心管理平臺(tái)實(shí)時(shí)接收發(fā)生在道路前端的異常事件報(bào)警信息，自動(dòng)確定事件發(fā)生的物理位置并與GIS系統(tǒng)聯(lián)動(dòng)，自動(dòng)調(diào)閱出相關(guān)CCTV攝像機(jī)或球機(jī)或云臺(tái)近距離查看大屏幕或主監(jiān)畫面鎖定實(shí)時(shí)監(jiān)控。

系統(tǒng)可對(duì)交通事件自動(dòng)進(jìn)行觸發(fā)式錄像，可記錄事件發(fā)生前5～300s和事件后5～300s整個(gè)事件發(fā)生的過程。具體功能如下所述。

4.3.1 車輛停駛

車輛在檢測(cè)區(qū)域內(nèi)停車或出現(xiàn)事故，確認(rèn)車輛停駛的報(bào)警時(shí)間1～120s可調(diào)。

4.3.2 車輛逆行

車輛在檢測(cè)區(qū)域內(nèi)逆行或倒車，確認(rèn)時(shí)間、行駛距離閾值可調(diào)。

4.3.3 遺撒物品

系統(tǒng)可對(duì)車道內(nèi)貨物遺撒、車輛碎片等報(bào)警，判斷時(shí)間、大小閾值可調(diào)。

4.3.4 低速車流

視域內(nèi)出現(xiàn)持續(xù)低于最低限速行駛車流，或行駛速度低于系統(tǒng)設(shè)置的報(bào)警速度，報(bào)警閾值可調(diào)，報(bào)警持續(xù)時(shí)間可設(shè)定。

4.3.5 大貨車檢測(cè)

具備大貨車檢測(cè)能力，可對(duì)視域中出現(xiàn)的大貨車進(jìn)行自動(dòng)檢測(cè)、記錄和報(bào)警，可對(duì)限時(shí)段、限路段中大貨車的出現(xiàn)進(jìn)行實(shí)時(shí)報(bào)警和記錄，報(bào)警響應(yīng)時(shí)間0～60s可調(diào)?？蓪?duì)大貨車在限行、禁行路段或時(shí)段出現(xiàn)的事件自動(dòng)預(yù)警，消除由于大貨車可能導(dǎo)致的交通事故和交通擁堵等隱患。

4.3.6 排隊(duì)超限

檢測(cè)區(qū)域車輛通行不暢且車輛排隊(duì)長度超過系統(tǒng)報(bào)警長度，排隊(duì)長度閾值可調(diào)，持續(xù)時(shí)間可調(diào)。

4.3.7 施工檢測(cè)

系統(tǒng)采用AI圖像識(shí)別技術(shù)提供道路施工檢測(cè)能力，可通過對(duì)道路中出現(xiàn)的反光錐、水馬等標(biāo)志物品判斷當(dāng)前視域內(nèi)可能存在施工事件并進(jìn)行自動(dòng)報(bào)警，報(bào)警響應(yīng)時(shí)間0～60s可調(diào)。

4.3.8 煙霧報(bào)警

系統(tǒng)可基于視頻對(duì)比度等特性，對(duì)封閉區(qū)域內(nèi)出現(xiàn)的團(tuán)霧、車輛尾氣聚集造成的能見度下降進(jìn)行報(bào)警，可以與COVI檢測(cè)系統(tǒng)、能見度檢測(cè)系統(tǒng)進(jìn)行聯(lián)動(dòng)，自動(dòng)提交管理人員進(jìn)行人工確認(rèn)。該報(bào)警信息可與PLC控制系統(tǒng)進(jìn)行聯(lián)動(dòng)控制，對(duì)車輛進(jìn)行分流控制，并啟動(dòng)通風(fēng)、照明、車道控制等子系統(tǒng)。

4.3.9 能見度檢測(cè)

基于視頻對(duì)道路能見度進(jìn)行檢測(cè)，可轉(zhuǎn)成以米為單位的能見度值，為道路交通在極端天氣下的管控? 以及團(tuán)霧檢測(cè)提供有效手段。

4.3.10 事件上報(bào)

視頻檢測(cè)器可以自動(dòng)檢測(cè)出上述事件并將事件檢測(cè)數(shù)據(jù)（包括記錄編號(hào)、設(shè)備編號(hào)、事件開始時(shí)間、事件結(jié)束時(shí)間、事件類型、檢測(cè)地點(diǎn)、檢測(cè)方向）實(shí)時(shí)上傳中心的綜合管理平臺(tái)。

參考文獻(xiàn)

［1］傅建法.高速公路車輛超溫預(yù)警測(cè)控系統(tǒng)［J］.中國交通信息化，2021（9）：130-133.

［2］戰(zhàn)蔭偉，朱百萬，楊卓.一種車輛識(shí)別算法的研究與應(yīng)用［J］.電子科技，2021（34）：1-7.

［3］朱百萬.基于深度學(xué)習(xí)的車輛識(shí)別技術(shù)研究與應(yīng)用［D］.廣州：廣東工業(yè)大學(xué)，2020.

［4］錢倩.基于圖像的貨車品牌類型識(shí)別方法研究［D］.南京：東南大學(xué)，2019.

（編輯 王永超）

Research on vehicle overtemperature detection system based on AI technology

Yang? Ying

（Jiangsu Changtian Zhiyuan Transportation Technology Co.， Ltd.， Nanjing 210036， China）

Abstract： Through the research and fusion of thermal imaging and visible light dual-mode fusion detection technology， depth learning holographic vehicle perception and information acquisition technology， video intelligent traffic monitoring and early warning technology， video intelligent traffic illegal monitoring and forensics technology and enhanced learning and machine learning technology， the paper develops a vehicle overtemperature monitoring and early-warning event detection system， which can realize the dangerous early-warning of vehicle overtemperature through the temperature change of vehicle body， cargo box and some front wheels and rear wheels which exceed the safe temperature but do not reach the burning value， to achieve the detection of road traffic incidents and fire incidents， effectively reduce the explosion of malignant accidents.

Key words： vehicle overtemperature monitoring and early warning; safety supervision; focus on vehicle monitoring