何玲玲,王勇

（1.深圳技師學(xué)院中德智造學(xué)院，廣東 深圳 518116; 2.深圳信息職業(yè)技術(shù)學(xué)院招生就業(yè)辦公室,廣東 深圳 518172）

基于現(xiàn)代煤礦監(jiān)控系統(tǒng)的高清智能網(wǎng)絡(luò)攝像機(jī)的應(yīng)用研究

何玲玲1,王勇2

（1.深圳技師學(xué)院中德智造學(xué)院，廣東 深圳 518116; 2.深圳信息職業(yè)技術(shù)學(xué)院招生就業(yè)辦公室,廣東 深圳 518172）

本文設(shè)計(jì)了一款采用H.264編碼標(biāo)準(zhǔn)的1080P高清網(wǎng)絡(luò)攝像機(jī)設(shè)計(jì)方案，實(shí)現(xiàn)了高壓縮比采集和傳輸高清視頻信號(hào)，并支持煤礦監(jiān)控的智能化視頻分析應(yīng)用。該款高清網(wǎng)絡(luò)攝像機(jī)是以Aptina CMOS圖像傳感器和海思高性能SOC處理器為設(shè)計(jì)基礎(chǔ)的，符合當(dāng)今煤礦行業(yè)安全監(jiān)控管理的發(fā)展需要。

視頻監(jiān)控；網(wǎng)絡(luò)攝像機(jī)；高清1080P

引言

煤炭是我國(guó)主要的能源資源，由于煤礦開(kāi)采在地下環(huán)境，極易發(fā)生塌方、瓦斯爆炸等人員傷亡事故，煤礦井下工作一向有著很高的危險(xiǎn)性。通過(guò)使用視頻監(jiān)控技術(shù)對(duì)井下工作面的狀況進(jìn)行遠(yuǎn)程監(jiān)控與管理，使得井上的安全生產(chǎn)管理人員能實(shí)時(shí)的監(jiān)視井下工作現(xiàn)場(chǎng)的生產(chǎn)情況并提醒可疑的違規(guī)操作，避免安全事故的發(fā)生，防患于未然。

目前，在煤礦普遍使用的傳統(tǒng)模擬監(jiān)控系統(tǒng)，清晰度已經(jīng)不足以有效的還原現(xiàn)場(chǎng)，分辨細(xì)節(jié)，同時(shí)也存在不易存儲(chǔ)，不能分享，不能遠(yuǎn)程管理的問(wèn)題。而數(shù)字高清視頻監(jiān)控的成熟，為煤礦監(jiān)控的更新?lián)Q代提供了完善的技術(shù)手段。網(wǎng)絡(luò)攝像機(jī)技術(shù)的成熟，為智能視頻分析技術(shù)在前端應(yīng)用，提供了可行的技術(shù)條件。

煤礦行業(yè)一直被稱為“高?！毙袠I(yè)，對(duì)生產(chǎn)作業(yè)的安全性要求較高，因此對(duì)視頻監(jiān)控圖像的清晰度提出了更高的要求。圖像越清晰，細(xì)節(jié)越明顯，智能視頻分析等應(yīng)用業(yè)務(wù)的準(zhǔn)確度也越高，視頻監(jiān)控對(duì)圖像高清度的需求幾乎是永無(wú)止境的。比如將局部圖像全屏顯示時(shí)，圖像仍具有很高分辨率，并不出現(xiàn)馬賽克現(xiàn)象；識(shí)別車(chē)輛牌照和人員面部特征時(shí)，足夠的像素?cái)?shù)才能得到較高識(shí)別率。

安防監(jiān)控行業(yè)目前主流的分辨率已經(jīng)達(dá)到1920x1080/30fps的高清實(shí)時(shí)采集與傳輸，在H.264編碼標(biāo)準(zhǔn)壓縮實(shí)時(shí)視頻時(shí)，碼率在2～4 Mbps。應(yīng)用于煤礦行業(yè)，將具有以下顯著的優(yōu)點(diǎn)：

（1）高清攝像機(jī)在同樣的場(chǎng)景下具有的清晰度更高。1080P分辨率的可用像素?cái)?shù)達(dá)到200W，是720P可用像素?cái)?shù)的2.25倍以及D1的5倍，對(duì)于拍攝相同視場(chǎng)角度的同一場(chǎng)景，能夠有更多的信息量去還原場(chǎng)景中的細(xì)節(jié)，對(duì)同一目標(biāo)分辨的更清晰真實(shí)。

（2）高清攝像機(jī)采用CMOS感光組件，相較于傳統(tǒng)的CCD感光器件，采用逐行掃描方式，提供更好的圖像質(zhì)量和更新率，使圖像細(xì)節(jié)更加清晰和細(xì)膩，能有效解決隔行掃描帶來(lái)的梳狀模糊等現(xiàn)象。視頻分析算法的基礎(chǔ)條件就是高質(zhì)量的圖像，這對(duì)井下工人行為識(shí)別、工作現(xiàn)場(chǎng)分析等智能視頻應(yīng)用具有重要意義。

（3）在高清視頻監(jiān)控系統(tǒng)架構(gòu)中，一臺(tái)高清攝像機(jī)的監(jiān)控效果可以超過(guò)數(shù)臺(tái)普通攝像機(jī)，圖像分辨率更高、有效信息更豐富，而且配合云臺(tái)使用，其監(jiān)控覆蓋角度和場(chǎng)景深度也更廣更深。高清視頻監(jiān)控系統(tǒng)比傳統(tǒng)監(jiān)控系統(tǒng)的點(diǎn)數(shù)少，線路布設(shè)容易，工程規(guī)模與造價(jià)更低，可以有效地縮減系統(tǒng)規(guī)模，減少前后端設(shè)備配置，減少系統(tǒng)維護(hù)的運(yùn)營(yíng)的人力，大大降低系統(tǒng)建設(shè)成本。

本文采用H.264編碼標(biāo)準(zhǔn)，具備智能視頻分析功能的1080P高清網(wǎng)絡(luò)攝像機(jī)十分適合在現(xiàn)代礦井安全生產(chǎn)高清監(jiān)控系統(tǒng)中使用。本文設(shè)計(jì)的高清網(wǎng)絡(luò)攝像機(jī)采用Aptina CMOS圖像傳感器和海思高性能SOC處理器，應(yīng)用于煤礦視頻監(jiān)控系統(tǒng)，能實(shí)時(shí)監(jiān)視井下作業(yè)情況，為礦井的安全生產(chǎn)提供了技術(shù)保障。

1 系統(tǒng)設(shè)計(jì)

網(wǎng)絡(luò)攝像機(jī)是視頻監(jiān)控系統(tǒng)核心，攝像機(jī)傳來(lái)的視頻號(hào)經(jīng)數(shù)字化再進(jìn)行圖像處理、編碼壓縮，通過(guò)網(wǎng)絡(luò)總線傳送到Web服務(wù)器。網(wǎng)絡(luò)上用戶無(wú)需其他主機(jī)控制，可以直接用瀏覽器觀看Web服務(wù)器上的圖像。

圖1 高清網(wǎng)絡(luò)攝像機(jī)系統(tǒng)框圖Fig.1 Hd network camera block diagram

本文設(shè)計(jì)的高清網(wǎng)絡(luò)攝像機(jī)系統(tǒng)設(shè)計(jì)如圖1所示，該圖表示了系統(tǒng)核心芯片之間的信號(hào)傳輸關(guān)系。Aptina CMOS圖像傳感器通過(guò)光敏二極管進(jìn)行將圖像轉(zhuǎn)換為數(shù)字信號(hào)；主處理器Hi3516C對(duì)圖像傳感器采集到的光電信號(hào)進(jìn)行數(shù)字處理，然后按照H.264標(biāo)準(zhǔn)對(duì)視頻流進(jìn)行編碼壓縮；以太網(wǎng)PHY芯片RTL8201EL把編碼后的視頻流傳輸?shù)骄W(wǎng)絡(luò)上。網(wǎng)絡(luò)用戶可以直接用瀏覽器觀看Web服務(wù)器上的圖像。下面就框圖中的主處理器和核心板等主要芯片做詳細(xì)說(shuō)明。

1.1 主處理器

本文設(shè)計(jì)的高清網(wǎng)絡(luò)攝像機(jī)采用海思半導(dǎo)體公司的Hi3516C為主處理器。Hi3516C是海思為高清攝像機(jī)開(kāi)發(fā)的一款專業(yè)型高端SOC芯片，支持1080P/30fps的H264多碼流編碼技術(shù)，提供高效優(yōu)質(zhì)的編碼視頻質(zhì)量，提供高性能的智能加速引擎，使客戶在滿足差異化的高清攝像機(jī)產(chǎn)品功能、性能、圖像質(zhì)量要求的同時(shí)，可有效降低設(shè)計(jì)與生產(chǎn)成本。

圖2 Hi3516C架構(gòu)圖Fig.2 Architecture diagram of Hi3516C

Hi3516C作為海思行業(yè)專用型HD IP攝像機(jī)SOC，集成新一代ISP，優(yōu)化后的編碼前圖像處理算法和H.264編碼器，并且采用了先進(jìn)低功耗工藝和低功耗架構(gòu)設(shè)計(jì)，在低碼率、高畫(huà)質(zhì)、低功耗等方面處于行業(yè)領(lǐng)先水平。Hi3516C集成POR、RTC、Audio Codec以及待機(jī)喚醒電路，為客戶極大的降低了ebom成本，且與海思DVR/NVR芯片相似的接口設(shè)計(jì)，能使客戶方便的進(jìn)行產(chǎn)品開(kāi)發(fā)和量產(chǎn)。

Hi3516C具有以下一些主要的功能特點(diǎn)：

（1）大視角：

在相同分辨率下，5M的視場(chǎng)范圍是2M的2倍。

（2）超高分辨率：

在相同視場(chǎng)角條件下，5M水平清晰度達(dá)到1500線以上。

（3）低噪度：

低照度攝像機(jī)是指在較低光照度的條件下仍然可以拍攝清晰的圖像。對(duì)于最低照度的級(jí)別劃分：暗光級(jí)：0.1Lux；月光級(jí)：0.01Lux；星光級(jí)：0.001Lux及以下；

（4）領(lǐng)先的多幀Line/Frame Base WDR技術(shù)：

在明暗對(duì)比強(qiáng)烈場(chǎng)景中，Line/Frame Base WDR技術(shù)通過(guò)控制圖像傳感器，分別對(duì)前后相接的多幀圖像進(jìn)行長(zhǎng)短時(shí)長(zhǎng)的曝光，進(jìn)行不同區(qū)域的裁剪并合成一副畫(huà)面，得到清晰圖像。

（5）ROI感興趣區(qū)域編碼技術(shù)：

通過(guò)對(duì)不同區(qū)域?qū)崿F(xiàn)不同幀率、清晰度的調(diào)節(jié)，使用戶在感興趣區(qū)域圖像質(zhì)量不損失的前提下，達(dá)到減少網(wǎng)絡(luò)帶寬占用，節(jié)省存儲(chǔ)容量的目的。

（6）Defog數(shù)字去霧技術(shù)：

通過(guò)在芯片內(nèi)部集成的ISP算法，檢測(cè)畫(huà)面中霧化程度并進(jìn)行分塊分區(qū)域進(jìn)行圖像亮度、對(duì)比度、色彩等方面的調(diào)節(jié)，減少霧霾對(duì)成像質(zhì)量的影響。

（7）DIS數(shù)字圖像穩(wěn)定技術(shù)：

數(shù)字圖像穩(wěn)定，又叫“電子防抖”，可有效的減少或消除由于攝像機(jī)安裝平臺(tái)不穩(wěn)定形成的畫(huà)面抖動(dòng)，通過(guò)緩存sensor像素和智能的參照物定位算法，使監(jiān)控畫(huà)面始終居中，使圖像中的物體穩(wěn)定。

（8）LDC鏡頭畸形校正技術(shù)：

通過(guò)智能選定參考物，修正由于鏡頭畸變導(dǎo)致的物體變形，達(dá)到還原真實(shí)場(chǎng)景的目的。

（9）支持Rotation走廊模式：

在特殊應(yīng)用中，攝像機(jī)希望獲得更多縱向數(shù)據(jù)，得到6:19圖像信息，通過(guò)垂直安裝攝像機(jī)并啟動(dòng)“走廊模式”可使得圖像正常的情況下使得sensor采集更多縱向信息。

（10）智能硬件加速核心IVE：

海思半導(dǎo)體獨(dú)樹(shù)一幟的智能硬件可自行運(yùn)行和加載復(fù)雜的視頻分析算法，這極大的降低系統(tǒng)對(duì)主控CPU性能的需求，為智能視頻產(chǎn)品的普及化開(kāi)辟了新的道路。

1.2 圖像傳感器

圖像傳感器是網(wǎng)絡(luò)攝像機(jī)的重要組成部分。根據(jù)元件的不同，目前圖像傳感器分為CCD（電耦合元件）和CMOS（金屬氧化物半導(dǎo)體元件）兩種主要技術(shù)， CCD傳感器雖然有靈敏度高、低照度效果好、色彩還原能力強(qiáng)等優(yōu)點(diǎn)，但其響應(yīng)速度低，無(wú)法滿足高清監(jiān)控?cái)z像機(jī)采用的逐行掃描方式，因此高清監(jiān)控?cái)z像機(jī)基本采用響應(yīng)快、功耗小、集成度高的CMOS傳感器。CMOS比較CCD最主要的優(yōu)勢(shì)是功耗小，但靈敏度較低，對(duì)光線的要求比較高。目前采用最新背照技術(shù)的CMOS傳感器，與表面照射型CMOS傳感器相比，背照式CMOS在靈敏度上優(yōu)勢(shì)突顯，顯著提高低光照條件下的拍攝效果。本文采用1080P專用的背照式CMOS器件，其靈敏度性能已經(jīng)與CCD接近，達(dá)到了網(wǎng)絡(luò)攝像機(jī)在低照度條件下的靈敏度要求。

在滿足煤礦用戶對(duì)像元尺寸、圖像質(zhì)量、低照度條件和系統(tǒng)造價(jià)等各方面要求的前提下，本設(shè)計(jì)為了追求高穩(wěn)定性，低成本的系統(tǒng)方案配置，圖像傳感器選用了Aptina公司的全高清1080p60圖像傳感器AR0330RC，該芯片采用背照技術(shù)，主要技術(shù)參數(shù)如下：靶面1/3英寸，像素2052*1536，60幀/秒，數(shù)據(jù)位寬10/12bit，時(shí)鐘頻率54MHz。像素設(shè)計(jì)2.2微米，采用Aptina A-Pix技術(shù)，支持并行接口選項(xiàng)和2通道MIPI輸出，采用CPS封裝(6.28mm*6.65mm)。圖3給出了Aptina公司的圖像傳感器AR0330CS架構(gòu)圖。

圖3 AR0330CS架構(gòu)圖Fig.3 Architecture diagram of AR0330CS

1.3 核心板的設(shè)計(jì)

核心板是以海思IPC4689D為基礎(chǔ)，進(jìn)行二次開(kāi)發(fā)設(shè)計(jì)，具備以下功能性能與接口：300萬(wàn)寬動(dòng)態(tài)CMOS傳感器,三層標(biāo)準(zhǔn)38mm*38mm板；接口豐富：音頻輸入輸出、復(fù)位、報(bào)警輸入輸出、RS422/RS485、TF卡接口，支持日夜轉(zhuǎn)換（支持選配IRCUT）感紅外,支持光敏電阻信號(hào)聯(lián)動(dòng)，適合裝多功能型（音/視頻、報(bào)警、WIFI）半球和海螺，也適合裝多功能型紅外槍機(jī)；H.264/H.265視頻編碼，支持雙碼流，最高分辨率2560*1080，彩色0.05Lux@F1.2,黑白0.01 Lux@F1.2。圖4給出了核心板的PCB板。具體性能指標(biāo)見(jiàn)表1

圖4 核心PCB板Fig.4 The core printed circuit board

表1 核心板性能指標(biāo)Tab.1 Performance index of the core printed circuit board

2 智能視頻分析技術(shù)的應(yīng)用

Hi3516C處理器內(nèi)置有智能硬件加速核心IVE，支持場(chǎng)景識(shí)別、運(yùn)動(dòng)目標(biāo)偵測(cè)、周界防范、視頻質(zhì)量診斷等多種智能分析應(yīng)用。

（1）運(yùn)動(dòng)目標(biāo)偵測(cè)

a)加載用戶的預(yù)定義規(guī)則，進(jìn)行算法的預(yù)處理，如防區(qū)設(shè)定、分析模式等。

b)對(duì)特殊場(chǎng)景進(jìn)行過(guò)濾預(yù)處理，如防抖動(dòng)、雨、雪、強(qiáng)燈光抑制等。

c)建立背景模型，自動(dòng)學(xué)習(xí)并更新背景情況。

d)提取前景中變化目標(biāo)，與前景相分離，檢測(cè)并分析目標(biāo)的活動(dòng)。

e)對(duì)跟蹤的運(yùn)動(dòng)目標(biāo)進(jìn)行分類識(shí)別，如人或車(chē)輛等。

f)根據(jù)規(guī)則判斷是否符合預(yù)設(shè)的報(bào)警規(guī)則。

（2）周界防范

檢測(cè)到運(yùn)動(dòng)的目標(biāo)違反設(shè)定的規(guī)則時(shí)產(chǎn)生報(bào)警，根據(jù)預(yù)先設(shè)置的報(bào)警途徑，傳輸報(bào)警到指定的用戶。芯片內(nèi)置支持絆線檢測(cè)、區(qū)域入侵、電子圍欄、人員徘徊、人群聚集、物品遺留、物品搬移、快速移動(dòng)等報(bào)警類型。

（3）視頻診斷

芯片內(nèi)置支持視頻遮擋、視頻丟失、視頻移位等報(bào)警類型。

圖5 井上井下智能視頻分析技術(shù)應(yīng)用場(chǎng)景Fig.5 Intelligent video analysis application of mine

3 在煤礦井下應(yīng)用的方案前景與建議

（1）通過(guò)視頻監(jiān)控的高清化改造，對(duì)各個(gè)生產(chǎn)安全隱患點(diǎn)進(jìn)行全面布控，通過(guò)引入視頻智能分析技術(shù)和移動(dòng)監(jiān)控技術(shù)對(duì)監(jiān)控死角做全覆蓋，全面提升煤礦生產(chǎn)工作的安全管理水平。

（2）在視頻監(jiān)控的基礎(chǔ)上，接入消防監(jiān)控、周界報(bào)警、環(huán)境質(zhì)量檢測(cè)、人員出入管理等子系統(tǒng)，實(shí)現(xiàn)安防數(shù)據(jù)的綜合集成，通過(guò)預(yù)案設(shè)計(jì)對(duì)各子系統(tǒng)進(jìn)行聯(lián)動(dòng)管理，提升煤礦周邊和內(nèi)部環(huán)境的監(jiān)控密度。

（3）接入礦井內(nèi)部各項(xiàng)生產(chǎn)環(huán)境數(shù)據(jù)，如溫度、濕度、瓦斯含量、透水、氧氣濃度等傳感器檢測(cè)數(shù)據(jù)，實(shí)現(xiàn)對(duì)煤礦整體數(shù)據(jù)的集成管理及顯示，并通過(guò)視頻對(duì)危險(xiǎn)地點(diǎn)和隱患進(jìn)行及時(shí)排查。

（4）產(chǎn)品的使用應(yīng)當(dāng)滿足井下的相關(guān)電氣安全規(guī)范，做好防火防爆設(shè)計(jì)。

4 結(jié)束語(yǔ)

基于H.264編碼標(biāo)準(zhǔn)高清網(wǎng)絡(luò)攝像機(jī)的優(yōu)勢(shì)是圖像清晰、存儲(chǔ)數(shù)據(jù)量小，遠(yuǎn)程實(shí)時(shí)監(jiān)控，即插即用、靈活集成。同時(shí)以太網(wǎng)供電節(jié)省成本，系統(tǒng)穩(wěn)定性高，對(duì)網(wǎng)絡(luò)傳輸帶寬要求低，特別適合在網(wǎng)絡(luò)上傳輸高質(zhì)量視頻，滿足對(duì)視頻內(nèi)容進(jìn)行智能分析的圖像質(zhì)量要求，并實(shí)時(shí)發(fā)出預(yù)警和報(bào)警。因而該設(shè)備若應(yīng)用在煤礦井下安全生產(chǎn)，能將大部分可視的安全生產(chǎn)隱患防患于未然，該應(yīng)用必將影響整個(gè)礦井安全監(jiān)測(cè)系統(tǒng)的發(fā)展趨勢(shì)。

[1]CARLOS Quadros,ALDRI Santos,MARIO Gerla.QoE-driven Dissemination of Real-time Videos over Vehicular Networks[J].Computer Communications,2016,7(8):24-28.

[2]MARIO Gerla.Multi-SeaCam Camera Now Available in HD[J].Ocean News and Technology,2013,19(11):51-54.

[3]田振華.IP高清攝像機(jī)的核心技術(shù)及應(yīng)用前景[J].中國(guó)安防.2012,9(3)42-46.TIAN Zhenhua.The Core Technology and application prospect of the IP Hight definition Camera[J].China Securlty and Protection.2012,9(3)42-46(in Chinese).

[4]呂亞靜.高清攝像機(jī)背光補(bǔ)償和色彩校正算法研究[D].西安: 西安電子科技大學(xué),2015:20-29.LU Yajing.Study of Backlight Com pensation and Color Correction Algorithms for HD Camera[D].Xian:XIDIAN University,2015:20-29(in Chinese).

[5]朱愛(ài)娟.面向智能視頻分析的網(wǎng)絡(luò)視頻監(jiān)控系統(tǒng)軟件設(shè)計(jì)與實(shí)現(xiàn)[D].南京: 東南大學(xué),2016:43-48.ZHU Aijuan .Intelligent Video Analysis Oriented Network Video Monitoring Sys tem Software Design and Implementation[D].Nanjing: Southeast University,2016:43-48(in Chinese).

[6]何玲玲,王清靈.一款適用于現(xiàn)代煤礦監(jiān)控系統(tǒng)的高清網(wǎng)絡(luò)攝像機(jī)的設(shè)計(jì)[J].深圳信息職業(yè)技術(shù)學(xué)院學(xué)報(bào),2012,10(3):63-69.HE Lingling,WANG qingling.Design of High Definition Network Camera Apply to Monitor System in Modern mine[J],Journal of Shenzhen institute of information technology,2012，10(3):63-69(in Chinese).

[7]何玲玲.煤礦監(jiān)控系統(tǒng)架構(gòu)改進(jìn)及視頻存儲(chǔ)服務(wù)器設(shè)計(jì)[J]，電子科技，2012，25(3):32-35 HE lingling.Design and Realization of Network Video Servicer Based on MPEG4 in Modern Mine[J].Electronic Science and Technology,2012,25(3): 32-35(in Chinese).

[8]唐承軍.CMOS高清網(wǎng)絡(luò)攝像機(jī)的設(shè)計(jì)與實(shí)現(xiàn)[D].上海：上海交通大學(xué)，2012 TAN Chenjun.Hardware Design and Implementation of CMOS Network Camera[D].Shanghai: Shanghai Jiao Tong University,2012(in Chinese).

【責(zé)任編輯：高潮】

Design and Realization of high definition network camera in modern mine monitor system

HE Lingling1,WANG YONG2
（1.Shenzhen Institute of Technology,Shenzhen 518116,China;2.Office of Recruitment and Employment,Shenzhen Institute of Information Technology,Shenzhen 518172,China）

In this paper,the design scheme of 1080P high definition network camera bas ed on H.264 coding standard are introduced，Which are achieved the high compression ratio collection and transmitting HD video signals and supporting the intelligent video analysis application of coal mine monitoring.The design of high definition network camera is based on Aptina CMOS imaging sensor and Haisi high-performance SOC processors,which are in accordance with the development and application of monitoring technology and management in modern mine.

video monitor; network camera; high definition1080P

TP277

A

1672-6332（2017）03-0035-05

2017-7-10

何玲玲（1978－），女(漢)，浙江義烏人，講師，碩士，主要研究方向：電子技術(shù)、視頻技術(shù)和監(jiān)控系統(tǒng)的研究。E-mail:38554946@qq.com