魏 峰

(1.煤炭科學技術(shù)研究院有限公司裝備分院，北京 100013； 2.北京市煤礦安全工程技術(shù)研究中心，北京 100013； 3.煤炭資源高效開采與潔凈利用國家重點實驗室，北京 100013)

煤礦井下環(huán)境復雜、具有多種生產(chǎn)場所，機電設備數(shù)量眾多，存在大量的安全事故隱患，煤礦日常安監(jiān)執(zhí)法是保障煤礦安全生產(chǎn)的重要抓手。然而，現(xiàn)行監(jiān)管監(jiān)察主要以人工現(xiàn)場執(zhí)法為主，存在監(jiān)管手段、裝備落后，存在取證過程時空不連續(xù)，以主觀經(jīng)驗評判為主等問題。因此，設計一種可量化、可復現(xiàn)而且能夠排除人為因素影響的執(zhí)法方式及裝備是規(guī)范執(zhí)法人員自由裁量權(quán)的重要手段。

1 基于情景感知驅(qū)動的執(zhí)法方法

情景感知驅(qū)動是一種研究基于圖片、視頻、場景以及實物設備的智能識別方法，具體來說是可以根據(jù)圖片識別出井下不同的工作場景，對應于不同的場景給出不同的反饋意見[1]。目前，相對流行的識別方法主要有三類：第一類是基于對象的情景分類，根據(jù)場景中出現(xiàn)的特定對象來區(qū)分不同的場景；第二類是基于區(qū)域的情景分類，首先通過目標候選區(qū)域選擇算法，生成一系列候選目標區(qū)域，再通過深度神經(jīng)網(wǎng)絡提取候選目標區(qū)域特征，并用這些特征進行分類；第三類是基于上下文的情景分類：將情景圖像看作全局對象而非圖像中的某一對象或細節(jié)，可降低局部噪聲對場景分類的影響[2]。

例如，利用基于特定對象的場景分類方法，這種分類方法以場景中的“對象”為識別單位，依據(jù)場景中出現(xiàn)的一個特定對象來識別、區(qū)分不同的工作場景。利用深度卷積神經(jīng)網(wǎng)絡提取圖像中各個對象的特征，并將提取出的對象特征進行分類。通?？梢允褂肎oogleNet、VGG-Net等深度模型進行場景分類[3]。將需要識別的設備或場景的圖片輸入到選定的神經(jīng)網(wǎng)絡模型，然后根據(jù)網(wǎng)絡的輸出我們可以獲取對象的類別，最后根據(jù)對象類別與場景的相關(guān)性，分析出這張圖片中的工作場景所屬的類別[4]，具體過程如圖1所示。

圖1 基于特定對象的場景分類過程

基于情景感知的執(zhí)法方法是利用執(zhí)法場景的協(xié)同感知和基于深度神經(jīng)網(wǎng)絡的情景信息處理技術(shù)，實現(xiàn)執(zhí)法路徑、執(zhí)法流程、執(zhí)法內(nèi)容、執(zhí)法標準、執(zhí)法設備及其他執(zhí)法輔助業(yè)務的自動觸發(fā)，較以往傳統(tǒng)的監(jiān)察執(zhí)法方法相比，基于情景感知驅(qū)動的執(zhí)法方法，是一種相對客觀、簡易的移動執(zhí)法方法。監(jiān)察執(zhí)法人員在井下執(zhí)法過程中，配套執(zhí)法裝備借助機器視覺分析技術(shù)和深度卷積神經(jīng)網(wǎng)絡算法，鑒別視頻片段及圖片中的場景特征，分析出所處的不同工作場景，根據(jù)相關(guān)作業(yè)規(guī)程、行業(yè)標準和監(jiān)管要求，自動生成執(zhí)法業(yè)務導航，通過本安型手持終端呈現(xiàn)給現(xiàn)場監(jiān)察執(zhí)法人員，用以輔助、引導整個監(jiān)察執(zhí)法過程。

執(zhí)法業(yè)務導航包括監(jiān)察人員所處工作場景中的執(zhí)法項目，執(zhí)法標準和所需執(zhí)法工具等提示信息，監(jiān)察人員按照業(yè)務導航中的信息引導，按照既定步驟及方式完成現(xiàn)場檢查、信息核實、違章取證等工作任務，整個執(zhí)法過程中，最大限度地降低了執(zhí)法人員的工作疏忽與主觀偏差，同時，電子物證自動標記工作場景信息隨整個基于時間戳可信證據(jù)鏈保存、上傳，防止中途惡意篡改?；谇榫案兄膱?zhí)法方法是在煤礦復雜環(huán)境背景下，對執(zhí)法場景準確感知、特征信息提取，進而自動生成執(zhí)法策略，引導輔助執(zhí)法人員的執(zhí)法過程，可以顯著提升執(zhí)法過程的精準性和高效性。

2 移動互聯(lián)的執(zhí)法終端

移動互聯(lián)的執(zhí)法終端基于安卓主控平臺，采用10Ah鋰離子電池組供電，主要由人員精確定位模塊、氣體參數(shù)檢測模塊、無線通信模塊、視頻、圖像記錄模塊、電子物證數(shù)據(jù)存儲模塊、電源管理模塊以及照明模塊組成，其系統(tǒng)結(jié)構(gòu)如圖2所示。執(zhí)法終端實物圖如圖3所示。

圖2 執(zhí)法終端結(jié)構(gòu)框圖

圖3 執(zhí)法終端實物圖

其中，精確人員定位模塊采用UWB技術(shù)，利用終端內(nèi)置板卡天線與人員定位基站進行通信，獲取位置信息，人員數(shù)據(jù)及上傳報警信息可由安卓主板的SPI接口實現(xiàn)；氣體參數(shù)檢測模塊可檢測周圍環(huán)境空氣中甲烷、氧氣、一氧化碳三個參數(shù)的實時濃度，安卓主板可通過UART接口獲取監(jiān)測數(shù)據(jù)或下發(fā)氣體標校參數(shù)；無線通訊模塊由WiFi通信和4G通信模塊構(gòu)成，可以依據(jù)井下現(xiàn)有通訊網(wǎng)絡自動靈活切換，執(zhí)法內(nèi)容及電子物證數(shù)據(jù)可由井下無線網(wǎng)絡向地面執(zhí)法管控平臺實時傳輸。同時，執(zhí)法終端可通過位于燈頭的麥克和揚聲器實現(xiàn)井下4G通訊功能，終端主體側(cè)面設計有快捷按鍵，佩戴者無需從腰間取下主機便可“一鍵接聽”電話；拍照攝錄模塊由USB數(shù)字式攝像頭構(gòu)成，鑒于井下光照度有限，該終端選用低照度外加紅外補償攝像頭，可通過終端主體上的拍照快捷鍵在井下黑暗環(huán)境中獲取較為清晰的視頻或圖像數(shù)據(jù)；執(zhí)法終端配備有高靈敏語音采集麥克，具備“一鍵錄音”功能，實時采集在執(zhí)法過程中的音頻數(shù)據(jù)，作為電子物證的一部分。照明模塊與普通鋰電池礦燈類似采用高亮度LED燈作為主光源，可實現(xiàn)遠近光自由切換。

執(zhí)法終端在整個煤礦監(jiān)察執(zhí)法過程中，可在線獲取執(zhí)法平臺下發(fā)的執(zhí)法任務與行進路線，通過實時攝像頭獲取周圍環(huán)境視頻或圖像數(shù)據(jù)，成功識別執(zhí)法人員所處井下工作場景后可自動生成并呈現(xiàn)執(zhí)法業(yè)務導航，在執(zhí)法過程中，可利用自帶氣體檢測模塊比對關(guān)鍵場所環(huán)境氣體參數(shù)，利用音、視頻或圖像拍照功能，記錄井下違章作業(yè)場景，自動保存并上傳電子物證數(shù)據(jù)，在執(zhí)法結(jié)束后，可依據(jù)執(zhí)法過程中錄入的氣體參數(shù)、人工記錄、電子物證等信息，自動生成執(zhí)法結(jié)果，并附加且能精確查詢執(zhí)法過程中的人員位置、軌跡以及環(huán)境參數(shù)、電子物證信息。

執(zhí)法終端在監(jiān)察執(zhí)法過程中全程自動采集視頻信息，結(jié)合特定場景特征及正常工作狀態(tài)，利用卷積神經(jīng)網(wǎng)絡和循環(huán)神經(jīng)網(wǎng)絡結(jié)合的方法來檢測執(zhí)法場景及執(zhí)法過程中的問題隱患[5]。具體過程為：首先將執(zhí)法視頻文件轉(zhuǎn)換成卷積神經(jīng)網(wǎng)絡能夠處理的圖像信息，例如轉(zhuǎn)換成1000幀的視頻圖像信息，之后將轉(zhuǎn)化好的圖像信息輸出到一個深度神經(jīng)網(wǎng)絡模型提取圖像特征值，輸出的結(jié)果即為每一幀信息的特征矩陣，最后利用循環(huán)神經(jīng)網(wǎng)絡對上述離散的圖像幀信息在整個時間域上進行整合，通過分類器進行場景識別及相應違章行為的分析[6]，整個過程如圖4所示。

圖4 視頻信息違章分析流程

在煤礦安全監(jiān)察執(zhí)法過程中，借助執(zhí)法終端的機器視覺技術(shù)并結(jié)合神經(jīng)網(wǎng)絡算法進行場景感知和違章識別，可以顯著提升執(zhí)法過程的科學性和高效性[7]。

3 基于時間戳的電子證據(jù)鏈

監(jiān)察執(zhí)法過程中所采集的電子物證，可利用時間戳與終端特征參數(shù)交互認證的電子證據(jù)鏈可信固化技術(shù)，與情景感知獲取的特征數(shù)據(jù)相融合，從而形成由內(nèi)容至形式不可篡改的完整的電子證據(jù)鏈[9]。具體過程為：首先運用時間戳電子簽名技術(shù)在電子證據(jù)上唯一地標識某一刻的時間信息，再結(jié)合DSA加密算法給電子證據(jù)附加針對終端設備、采集人員體征等物理屬性的完整性權(quán)威，最后通過GIS技術(shù)、實時數(shù)據(jù)庫技術(shù)、硬件接口技術(shù)、物聯(lián)網(wǎng)技術(shù)等實時上傳至煤礦安全監(jiān)察執(zhí)法平臺，形成完整、可信證據(jù)鏈。安監(jiān)執(zhí)法系統(tǒng)匯集來自平臺的電子物證，分析評判，形成最終執(zhí)法結(jié)果及文書，整個流程如圖5所示。

圖5 執(zhí)法電子證據(jù)鏈流程

遠程時間戳服務器對電子物證數(shù)據(jù)提供時間戳加蓋服務，當客戶端對電子物證執(zhí)行完取證、固定工作，并將Hash值上傳到時間戳服務器時，時間戳服務器對Hash值上傳時間進行時間戳加蓋，通過法定時間參數(shù)的唯一性和不可逆性，輔助證明該電子物證的唯一性[10]，其流程如圖6所示。

圖6 可信時間戳工作流程

4 基于WebGIS的煤礦安全監(jiān)察執(zhí)法平臺

煤礦安全監(jiān)察執(zhí)法過程由基于WebGIS的執(zhí)法平臺統(tǒng)一管理。借助高性能服務器端強大的應用模型分析、運算能力，WebGIS服務可實現(xiàn)地理空間數(shù)據(jù)發(fā)布、監(jiān)察數(shù)據(jù)查詢與交互、Web資源調(diào)用等功能[11]。按照煤礦安全監(jiān)管監(jiān)察業(yè)務需要，整個平臺可分為八個功能模塊，如圖7所示。

圖7 系統(tǒng)模塊結(jié)構(gòu)圖

“礦井信息模塊”用于顯示受檢礦井的基本信息，包括礦井特征、運行狀態(tài)、人員信息等；“任務管理模塊”可根據(jù)礦井信息內(nèi)容以及近期的監(jiān)察監(jiān)管計劃等，自動規(guī)劃監(jiān)察執(zhí)法任務如果確認無誤，則可以分配到本安型手持執(zhí)法終端設備中；“流程管理模塊”顯示監(jiān)管監(jiān)察的執(zhí)法流程及各流程的詳細說明，方便執(zhí)法人員事先熟悉本次執(zhí)法過程，在執(zhí)法過程中也可起到提示作用，規(guī)范現(xiàn)場執(zhí)法行為；“終端管理模塊”可以授權(quán)、激活本安型手持終端，在執(zhí)法前將執(zhí)法人員與指定終端關(guān)聯(lián)，同時將本次執(zhí)法任務下載到手持終端里，在執(zhí)法過程中，平臺可通過4G、WiFi等移動互聯(lián)手段，實時與終端通訊，提供技術(shù)支持、獲取并保存加密電子物證，執(zhí)法完成后，可從終端上傳執(zhí)法結(jié)果；“記錄查詢模塊”可以在執(zhí)法記錄上傳之后，隨時查閱執(zhí)法過程中人工記錄或者拍攝的視頻、圖像等原始記錄；“證據(jù)查詢模塊”可在對執(zhí)法結(jié)果發(fā)生質(zhì)疑時，提供物證支持，所有保存在平臺的電子物證數(shù)據(jù)均為時間戳及人員體征加密數(shù)據(jù)，真實有效，透明公開，可防止人為惡意篡改；“實時預覽模塊”可以在GIS地圖上實時調(diào)取監(jiān)察執(zhí)法人員的行動軌跡，同時，獲取現(xiàn)場語音、畫面等信息，可遠程監(jiān)督執(zhí)法人員及執(zhí)法行為是否規(guī)范，當現(xiàn)場遇到問題時，也可以遠程求助地面人員進行協(xié)助處理；“報告管理模塊”可以根據(jù)執(zhí)法任務、現(xiàn)場原始記錄、電子物證等信息，自動生成并記錄執(zhí)法報告，同時向上一級監(jiān)管部門平臺推送此次監(jiān)察結(jié)果。

5 結(jié) 語

本文研究內(nèi)容主要為礦山安全生產(chǎn)監(jiān)察執(zhí)法提供技術(shù)支持服務和手段，通過研究多語義情景感知、多參數(shù)信息采集、異構(gòu)數(shù)據(jù)融合、WebGIS等先進技術(shù)，研制相應系列安監(jiān)執(zhí)法裝備及管控平臺。其研究的相關(guān)技術(shù)及設備可應用于全國煤礦企業(yè)和各級政府監(jiān)管監(jiān)察機構(gòu)，可有效解決現(xiàn)場執(zhí)法人員在執(zhí)法過程中擁有不同程度自由裁量權(quán)的問題。同時，對促進煤礦監(jiān)察執(zhí)法技術(shù)裝備的升級換代，提升監(jiān)管監(jiān)察效能，推動行業(yè)技術(shù)全面進步，具有積極的作用，社會效益巨大。