李博，楊欣

（中國(guó)鐵路武漢局集團(tuán)有限公司麻城車務(wù)段，湖北 黃岡438300）

鐵路車務(wù)站段既有的監(jiān)控系統(tǒng)均未設(shè)置監(jiān)控報(bào)警功能，缺乏對(duì)特定場(chǎng)景違章動(dòng)作的自動(dòng)判斷，指揮中心專人查看視頻監(jiān)控畫面判斷現(xiàn)場(chǎng)職工違章違紀(jì)情況，不僅費(fèi)時(shí)費(fèi)力，也不能及時(shí)發(fā)現(xiàn)問題。為提高監(jiān)控效率，對(duì)特定區(qū)域場(chǎng)景進(jìn)行識(shí)別分析，根據(jù)設(shè)定標(biāo)準(zhǔn)判斷職工作業(yè)情況，并將不規(guī)范行為的場(chǎng)景向指揮中心端發(fā)出實(shí)時(shí)告警信息，并在后臺(tái)記錄存檔，重點(diǎn)對(duì)行車室睡崗、外勤接車與否、咽喉區(qū)閑雜人員闖入等場(chǎng)景進(jìn)行實(shí)時(shí)監(jiān)控，并進(jìn)行AI智能分析，通過視頻圖像深度處理，自動(dòng)識(shí)別作業(yè)情況，對(duì)違章違紀(jì)的情況向監(jiān)控中心進(jìn)行報(bào)警并存檔，利用事件觸發(fā)報(bào)警傳輸?shù)臋C(jī)制，能有效提升網(wǎng)絡(luò)利用率，提升數(shù)據(jù)的存儲(chǔ)效率，管理人員根據(jù)實(shí)時(shí)報(bào)警或存檔記錄進(jìn)行確認(rèn)后進(jìn)行教育考核。

1 研究?jī)?nèi)容及對(duì)象

通過對(duì)視頻數(shù)據(jù)的采集、分析、建模，自動(dòng)識(shí)別異常情況、提取關(guān)鍵信息，有效減少管理人員勞動(dòng)強(qiáng)度，實(shí)現(xiàn)實(shí)時(shí)監(jiān)控、實(shí)時(shí)報(bào)警、實(shí)時(shí)處理，提高安全盯控與應(yīng)急指揮的實(shí)時(shí)性和時(shí)效性，提升網(wǎng)絡(luò)利用率和數(shù)據(jù)存儲(chǔ)效率。

該系統(tǒng)主要在中國(guó)鐵路武漢局集團(tuán)有限公司麻城車務(wù)段下屬中驛車站的兩端咽喉區(qū)、行車室、助理接車亭配備固定式攝像頭，用于實(shí)時(shí)監(jiān)控站區(qū)及作業(yè)人員（咽喉區(qū)非工作人員侵入、外勤助理接車、值班室人員睡崗、離崗）的作業(yè)情況并進(jìn)行研究分析。

2 系統(tǒng)研究方法

2.1 技術(shù)路線

鐵路車站監(jiān)控視頻智能識(shí)別技術(shù)的研究應(yīng)用采用邊緣計(jì)算路線，將AI計(jì)算模組放在攝像頭一側(cè)，采用網(wǎng)絡(luò)、計(jì)算、存儲(chǔ)、應(yīng)用核心能力一體化，就近提供最近端服務(wù)。其應(yīng)用程序在邊緣側(cè)發(fā)起，產(chǎn)生更快的網(wǎng)絡(luò)服務(wù)響應(yīng)，滿足鐵路行業(yè)在實(shí)時(shí)業(yè)務(wù)、應(yīng)用智能、安全與隱私保護(hù)等方面的基本需求。

2.2 技術(shù)優(yōu)勢(shì)與對(duì)比

邊緣計(jì)算具有低時(shí)延、高帶寬、高可靠、海量連接、異構(gòu)匯聚和本地安全隱私保護(hù)等特點(diǎn)。實(shí)現(xiàn)監(jiān)控視頻AI化，主要有兩種技術(shù)路線。一種是云計(jì)算的方式，將視頻數(shù)據(jù)匯總到云端進(jìn)行分析處理；另一種是邊緣計(jì)算（AI計(jì)算盒）的方式，在設(shè)備端處理好視頻，提取有用的數(shù)據(jù)再上傳到云端[1]。

邊緣計(jì)算和云計(jì)算路線對(duì)比如下：①邊緣計(jì)算可以實(shí)時(shí)或更快地進(jìn)行數(shù)據(jù)處理和分析，讓數(shù)據(jù)處理更靠近源，相比外部數(shù)據(jù)中心或者云，可以縮短延遲時(shí)間。②在成本預(yù)算上可以大大減輕經(jīng)費(fèi)預(yù)算。企業(yè)在本地設(shè)備上的數(shù)據(jù)管理解決方案所花費(fèi)的成本大大低于云和數(shù)據(jù)中心網(wǎng)絡(luò)。③減少網(wǎng)絡(luò)流量。隨著物聯(lián)網(wǎng)設(shè)備數(shù)量的增加，數(shù)據(jù)生成繼續(xù)以創(chuàng)紀(jì)錄的速度增長(zhǎng)，結(jié)果網(wǎng)絡(luò)帶寬變得更加有限，壓倒了云，導(dǎo)致更大的數(shù)據(jù)瓶頸。④提高應(yīng)用程序效率。通過降低延遲級(jí)別，應(yīng)用程序可以更高效、快速地運(yùn)行。⑤個(gè)性化。通過邊緣計(jì)算，可以持續(xù)學(xué)習(xí)，根據(jù)個(gè)人的需求調(diào)整模型，帶來個(gè)性化互動(dòng)體驗(yàn)。⑥安全和隱私保護(hù)。網(wǎng)絡(luò)邊緣數(shù)據(jù)涉及個(gè)人隱私，傳統(tǒng)的云計(jì)算模式需要將這些隱私數(shù)據(jù)上傳至云計(jì)算中心，這將增加泄露用戶隱私數(shù)據(jù)的風(fēng)險(xiǎn)。在邊緣計(jì)算中，身份認(rèn)證協(xié)議的研究應(yīng)借鑒現(xiàn)有方案的優(yōu)勢(shì)之處，同時(shí)結(jié)合邊緣計(jì)算中分布式、移動(dòng)性等特點(diǎn)，加強(qiáng)統(tǒng)一認(rèn)證、跨域認(rèn)證和切換認(rèn)證技術(shù)的研究，以保障用戶在不同信任域和異構(gòu)網(wǎng)絡(luò)環(huán)境下的數(shù)據(jù)和隱私安全[2]。

2.3 系統(tǒng)的技術(shù)應(yīng)用

深度學(xué)習(xí)技術(shù)。鐵路車站監(jiān)控視頻智能識(shí)別系統(tǒng)采用深度學(xué)習(xí)技術(shù)，相對(duì)于傳統(tǒng)視覺技術(shù)而言，能提供更準(zhǔn)確的物體識(shí)別能力。

邊緣計(jì)算技術(shù)。利用TensorRT，利用層間/張量融合與數(shù)據(jù)精度校準(zhǔn)技術(shù)，實(shí)現(xiàn)了AI計(jì)算盒（邊緣設(shè)備）上的高效運(yùn)行。

Websocket技術(shù)。應(yīng)用Websocket技術(shù)，實(shí)現(xiàn)多路Web端實(shí)時(shí)視頻流直播。免去了安裝客戶端的煩惱，也免去了不同客戶端設(shè)備之間不兼容的問題。

可視化技術(shù)。應(yīng)用基于ECharts的圖表可視化技術(shù)，可以統(tǒng)計(jì)查看更加直觀的報(bào)警記錄。

3 系統(tǒng)的架構(gòu)

3.1 系統(tǒng)結(jié)構(gòu)組成

從物理拓?fù)渖峡?，系統(tǒng)包括數(shù)字網(wǎng)絡(luò)攝像頭、AI計(jì)算模組、報(bào)警管理服務(wù)器、交換機(jī)、數(shù)字錄像機(jī)、操作終端等組成部分。

從系統(tǒng)架構(gòu)上看，分為AI邊緣層、業(yè)務(wù)層和系統(tǒng)層三個(gè)層次，如圖1所示。

圖1 系統(tǒng)架構(gòu)組成

AI邊緣層。負(fù)責(zé)對(duì)視頻數(shù)據(jù)進(jìn)行采集和智能分析，并向上提供報(bào)警事件。

業(yè)務(wù)層。負(fù)責(zé)存儲(chǔ)報(bào)警記錄、進(jìn)行事件檢索、處理報(bào)警工作流、提供對(duì)外接口等工作。

系統(tǒng)層。負(fù)責(zé)系統(tǒng)管理、用戶管理、終端交互等，提供對(duì)服務(wù)層的接口。

3.2 系統(tǒng)功能模塊

3.2.1 固定式攝像頭算法模塊

固定式攝像頭算法模塊如圖2所示。站區(qū)（兩端岔區(qū)視頻范圍內(nèi)）如果有非工作人員進(jìn)入，則定義為人員入侵事件。

圖2 固定式攝像頭算法模塊

算法判斷人員進(jìn)入視頻范圍，則自動(dòng)向系統(tǒng)終端報(bào)警，提示有閑雜人員進(jìn)入，同時(shí)通過可識(shí)別的防護(hù)衣和防護(hù)帽來區(qū)分工作人員和非工作人員，極大減少誤報(bào)率[3]。

3.2.2 立崗接車識(shí)別模塊

立崗接車識(shí)別模塊如圖3所示。在有車進(jìn)站的情況下，在接車崗?fù)の闯霈F(xiàn)接車人員，即定義未立崗接車。

圖3 立崗接車識(shí)別模塊

在劃定的視頻范圍內(nèi)，列車通過畫面與視頻內(nèi)是否有人員進(jìn)行比對(duì)。算法可識(shí)別行進(jìn)中的列車以及接車員，可設(shè)置要求多長(zhǎng)時(shí)間提前到崗[4]。

3.2.3 睡崗及離崗識(shí)別模塊

睡崗及離崗識(shí)別模塊如圖4所示。在工作期間，工作人員在崗位上靜止超過一定時(shí)間（系統(tǒng)設(shè)定為15 min），即為睡崗事件。算法根據(jù)劃定的睡崗區(qū)域，以及設(shè)定的報(bào)警門限時(shí)間，對(duì)睡崗行為進(jìn)行判斷，超過門限時(shí)間即報(bào)警。

圖4 睡崗及離崗識(shí)別模塊

在規(guī)定時(shí)間內(nèi)，工作人員離開視頻監(jiān)控范圍內(nèi)，視為離崗事件。算法根據(jù)劃定的離崗區(qū)域，以及設(shè)定的報(bào)警門限時(shí)間，對(duì)離崗行為進(jìn)行判斷，超過門限時(shí)間即報(bào)警。

3.3 系統(tǒng)管理模塊

3.3.1 視頻輪播

首頁視頻輪播頁面如圖5所示，采用H5的方式進(jìn)行視頻呈現(xiàn)，當(dāng)有報(bào)警產(chǎn)生時(shí)，直接彈出報(bào)警信息，出現(xiàn)報(bào)警信息頁面。

圖5 視頻輪播頁面

3.3.2 報(bào)警信息管理

報(bào)警信息管理頁面如圖6所示，包含首警圖、報(bào)警前后30 s視頻以及實(shí)時(shí)視頻畫面，方便用戶進(jìn)行查看。報(bào)警信息管理頁面主要是將報(bào)警記錄以倒序的方式列出來，也可以根據(jù)發(fā)生時(shí)間、關(guān)鍵詞等進(jìn)行查詢。用戶可對(duì)報(bào)警記錄進(jìn)行簽收和處理操作，可填寫報(bào)警原因及處理意見，并保存到系統(tǒng)中[5]。

圖6 報(bào)警信息管理頁面

3.3.3 分析統(tǒng)計(jì)

分析統(tǒng)計(jì)頁面如圖7所示。其中，板載信息頁面負(fù)責(zé)統(tǒng)計(jì)所有AI盒子的信息，包括CPU占用率、CPU溫度、內(nèi)存使用率、存儲(chǔ)使用率、NPU使用率、NPU溫度等。報(bào)警分類統(tǒng)計(jì)頁面，負(fù)責(zé)按類別統(tǒng)計(jì)所有的報(bào)警信息，為安全指導(dǎo)意見提供數(shù)據(jù)支撐。

圖7 分析統(tǒng)計(jì)頁面

3.3.4 設(shè)備管理

設(shè)備管理如圖8所示。其中，AI計(jì)算盒管理包括編輯AI計(jì)算盒的編號(hào)、IP、端口號(hào)、機(jī)構(gòu)等信息，同時(shí)能提供修改和刪除等操作。攝像頭管理包括攝像頭的IP地址配置、報(bào)警管理、端口號(hào)、編號(hào)等信息配置。

圖8 設(shè)備管理頁面

4 系統(tǒng)主要指標(biāo)和創(chuàng)新點(diǎn)

4.1 主要技術(shù)指標(biāo)

固定式監(jiān)控要達(dá)到的指標(biāo)為：檢出率100%，準(zhǔn)確率大于90%，綜合檢出時(shí)間小于等于2 s。

技術(shù)指標(biāo)分為：①建立樣本庫(kù)。針對(duì)每個(gè)智能檢測(cè)目標(biāo)，要求樣本規(guī)模大于2 000個(gè)，正樣本比例大于50%，標(biāo)注信息樣本比例大于80%。②視頻結(jié)構(gòu)化方法技術(shù)指標(biāo)為一級(jí)響應(yīng)等級(jí)。系統(tǒng)報(bào)警分為三級(jí)，由高到低分別為一級(jí)、二級(jí)、三級(jí)，結(jié)構(gòu)化存儲(chǔ)相較于傳統(tǒng)存儲(chǔ)方式，提高至少50倍存儲(chǔ)利用率。③關(guān)鍵視頻片段提取。對(duì)固定式監(jiān)控，能自動(dòng)提取事件發(fā)生前后30 s的關(guān)鍵視頻片段。

4.2 系統(tǒng)創(chuàng)新點(diǎn)

將深度學(xué)習(xí)技術(shù)應(yīng)用于鐵路行崗視頻監(jiān)控領(lǐng)域，能夠識(shí)別咽喉區(qū)入侵、外勤點(diǎn)接車規(guī)范、離崗睡崗等行為規(guī)范。針對(duì)咽喉區(qū)入侵應(yīng)用場(chǎng)景，實(shí)現(xiàn)了根據(jù)工作服判別工作人員的識(shí)別效果，極大程度上減少了誤報(bào)。針對(duì)外勤點(diǎn)接車規(guī)范，實(shí)現(xiàn)了同時(shí)檢測(cè)行進(jìn)中的列車和工作人員，將出現(xiàn)行進(jìn)中的列車作為觸發(fā)事件，同時(shí)判斷規(guī)定時(shí)間內(nèi)是否有工作人員到崗，準(zhǔn)確有效。針對(duì)離崗睡崗行為規(guī)范，重新訓(xùn)練了深度學(xué)習(xí)模型，實(shí)現(xiàn)了從背后檢測(cè)人員在崗睡崗情況的算法，相較于普通的需要人員正面圖像才能識(shí)別的算法而言有較大的提升。針對(duì)夜間場(chǎng)景，專門訓(xùn)練了深度學(xué)習(xí)模型，能準(zhǔn)確識(shí)別夜間攝像頭下的黑白目標(biāo)。

5 結(jié)束語

國(guó)鐵集團(tuán)2021年度1號(hào)文件中提及發(fā)揮站段安全生產(chǎn)指揮中心作用，加強(qiáng)作業(yè)環(huán)節(jié)管控，研究應(yīng)用音視頻、大數(shù)據(jù)技術(shù)、人工智能等技防手段，對(duì)現(xiàn)場(chǎng)作業(yè)行為進(jìn)行智能識(shí)別、實(shí)時(shí)預(yù)警、精準(zhǔn)畫像、有效管控。此次車務(wù)站段監(jiān)控視頻智能識(shí)別技術(shù)的研究應(yīng)用，是嚴(yán)抓現(xiàn)場(chǎng)管控和提高鐵路安全管理水平的重要?jiǎng)?chuàng)新舉措，是構(gòu)建車務(wù)站段智能指揮中樞重要一環(huán)，在研究中探索、在應(yīng)用中總結(jié)，進(jìn)一步推進(jìn)鐵路安全管理向智能管控方向縱深發(fā)展。