潘洋 楊卓宇 王新華 吳亞聯(lián)
摘 要:針對(duì)家政服務(wù)行業(yè)出現(xiàn)的服務(wù)人員虐待幼兒和老人事件,設(shè)計(jì)了一款監(jiān)控預(yù)警系統(tǒng)?;跈C(jī)器視覺(jué)實(shí)時(shí)監(jiān)測(cè)家庭運(yùn)動(dòng)對(duì)象,對(duì)家裝攝像頭獲取的圖像數(shù)據(jù)進(jìn)行實(shí)時(shí)分析與處理,即對(duì)所采集的視頻進(jìn)行運(yùn)動(dòng)對(duì)象提取、追蹤,再進(jìn)行特征提取,將所提取的特征與異常行為特征進(jìn)行比對(duì),如果服務(wù)人員出現(xiàn)異常行為,系統(tǒng)將會(huì)給監(jiān)護(hù)人發(fā)送預(yù)警信息。系統(tǒng)能在服務(wù)人員虐待老人、孩子時(shí)及時(shí)提醒監(jiān)護(hù)人對(duì)突發(fā)事件進(jìn)行干預(yù),以免家人受到嚴(yán)重傷害或二次虐待。
關(guān)鍵詞:行為識(shí)別;語(yǔ)音識(shí)別;信息傳遞;機(jī)器視覺(jué);ARM9;WiFi
中圖分類(lèi)號(hào):TP391文獻(xiàn)標(biāo)識(shí)碼:A文章編號(hào):2095-1302(2019)07-00-04
0 引 言
目前家政服務(wù)市場(chǎng)缺乏相關(guān)法律對(duì)其服務(wù)進(jìn)行規(guī)范和約束,使得該行業(yè)監(jiān)管缺位,導(dǎo)致家政行業(yè)亂象頻生。雇主有可能聘請(qǐng)到品行差的保姆,對(duì)老人、孩子缺乏耐心,動(dòng)輒打罵。新聞報(bào)道中不乏保姆虐待照顧對(duì)象的事件,而現(xiàn)有監(jiān)測(cè)技術(shù)只能拍攝圖像內(nèi)容,卻無(wú)法對(duì)圖像內(nèi)容做進(jìn)一步分析[1],當(dāng)拍攝圖像中監(jiān)測(cè)對(duì)象出現(xiàn)異常行為時(shí),用戶只能通過(guò)觀看視頻才能發(fā)現(xiàn),若未及時(shí)發(fā)現(xiàn)異常行為,則很有可能造成極壞的結(jié)果。
針對(duì)上述現(xiàn)象,文中設(shè)計(jì)并開(kāi)發(fā)了一款異常行為安全預(yù)警系統(tǒng),以輔助解決上述問(wèn)題。本文主要闡述了異常行為監(jiān)控預(yù)警系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)過(guò)程,為改善家政服務(wù)提供思路。
1 系統(tǒng)功能分析與總體設(shè)計(jì)
1.1 系統(tǒng)功能分析
針對(duì)家庭生活場(chǎng)景,監(jiān)控預(yù)警的安全系統(tǒng)主要設(shè)計(jì)了以下功能。
(1)異常行為識(shí)別預(yù)警。如果攝像頭檢測(cè)到保姆有推搡、打人等不良行為時(shí),系統(tǒng)將通過(guò)短信等方式通知監(jiān)護(hù)人。
(2)語(yǔ)音求助。用戶在危急情況下可以通過(guò)語(yǔ)音向監(jiān)護(hù)人求助。
(3)遠(yuǎn)程查看。監(jiān)護(hù)人可以遠(yuǎn)程在網(wǎng)上查看攝像頭的實(shí)時(shí)錄像。
1.2 系統(tǒng)功能設(shè)計(jì)
結(jié)合家政服務(wù)的需求分析,異常行為監(jiān)控預(yù)警系統(tǒng)將ARM9作為控制器,同時(shí)還包含WiFi模塊、GSM模塊、攝像頭模塊、電源模塊、語(yǔ)音識(shí)別模塊等。攝像頭模塊獲取圖像數(shù)據(jù),通過(guò)WiFi模塊傳輸給ARM9控制器進(jìn)行圖像數(shù)據(jù)分析處理,語(yǔ)音識(shí)別模塊用于識(shí)別求助信息,GSM模塊用于發(fā)送信息給監(jiān)護(hù)人[2]。系統(tǒng)設(shè)計(jì)框圖如圖1所示。
2 硬件模塊設(shè)計(jì)與實(shí)現(xiàn)
2.1 智能控制模塊
智能控制模塊將來(lái)自其他模塊的有效信息進(jìn)行處理,以控制系統(tǒng)的調(diào)度與運(yùn)行。系統(tǒng)采用基于ARM920T核心,擁有S3C2440A芯片與0.13 ?m CMOS標(biāo)準(zhǔn)宏單元和存儲(chǔ)器單元的ARM9核心開(kāi)發(fā)板。電路原理如圖2所示。
2.2 WiFi模塊
WiFi模塊又名串口WiFi模塊,屬于物聯(lián)網(wǎng)傳輸層,可將串口或TTL電平轉(zhuǎn)為符合WiFi無(wú)線網(wǎng)絡(luò)通信標(biāo)準(zhǔn)的嵌入式模塊,內(nèi)置無(wú)線網(wǎng)絡(luò)協(xié)議IEEE 802.11b.g.n協(xié)議棧以及TCP/IP協(xié)議棧。傳統(tǒng)硬件設(shè)備可利用WiFi聯(lián)入互聯(lián)網(wǎng),實(shí)現(xiàn)無(wú)線智能家居、M2M等物聯(lián)網(wǎng)應(yīng)用。系統(tǒng)采用ESP8266 WiFi模塊,實(shí)現(xiàn)的主要功能包括串口透?jìng)?、PWM調(diào)控、GPIO控制。ESP8266電路原理如圖3所示。
2.3 GSM模塊
GSM模塊是將GSM射頻芯片、基帶處理芯片、存儲(chǔ)器、功放器件等集成在一塊線路板上,具有獨(dú)立操作系統(tǒng)、GSM射頻處理、基帶處理并提供標(biāo)準(zhǔn)接口的功能模塊,以及發(fā)送SMS短信、語(yǔ)音通話、GPRS數(shù)據(jù)傳輸?shù)裙δ堋i_(kāi)發(fā)人員使用ARM或者單片機(jī)通過(guò)RS 232串口與GSM模塊通信,使用標(biāo)準(zhǔn)的AT命令控制GSM模塊實(shí)現(xiàn)無(wú)線通信功能,例如發(fā)送短信、撥打電話、GPRS撥號(hào)上網(wǎng)等?;贕SM模塊產(chǎn)品的開(kāi)發(fā)往往基于ARM平臺(tái),使用嵌入式系統(tǒng)進(jìn)行開(kāi)發(fā)。部分GSM模塊具有開(kāi)放內(nèi)置平臺(tái)功能,方便客戶將自己的程序嵌入到模塊內(nèi)的軟件平臺(tái)中。本系統(tǒng)采用GPRS-GA6模塊,電路原理如圖4所示。
通過(guò)GSM模塊將信息發(fā)送給監(jiān)護(hù)人,方便監(jiān)護(hù)人及時(shí)了解家庭情況。
2.4 語(yǔ)音識(shí)別模塊
系統(tǒng)采用LD3320語(yǔ)音控制芯片實(shí)現(xiàn)簡(jiǎn)單的語(yǔ)音識(shí)別。LD3320芯片上集成有高精度的A/D和D/A接口,無(wú)需外部轉(zhuǎn)化電路,即可實(shí)現(xiàn)簡(jiǎn)單的語(yǔ)音識(shí)別、聲音控制、人機(jī)對(duì)講等功能;無(wú)需特定人員的語(yǔ)音,只需要將關(guān)鍵詞進(jìn)行動(dòng)態(tài)編輯即可。語(yǔ)音識(shí)別模塊電路原理如圖5所示。
3 系統(tǒng)軟件設(shè)計(jì)與實(shí)現(xiàn)
3.1 軟件功能介紹
基于機(jī)器視覺(jué)的家人安全監(jiān)控預(yù)警系統(tǒng)的軟件需要在以ARM9為微處理器的控制設(shè)備上運(yùn)行,主要包括行為識(shí)別、語(yǔ)音識(shí)別及發(fā)送。
(1)行為識(shí)別完成運(yùn)動(dòng)檢測(cè)、目標(biāo)跟蹤、分析識(shí)別等任務(wù)。
(2)語(yǔ)音識(shí)別具有結(jié)果確認(rèn)、ASR識(shí)別、復(fù)位識(shí)別等功能。
(3)發(fā)送具有建立通信連接、發(fā)送指令等功能。
3.1.1 行為識(shí)別端軟件功能
(1)運(yùn)動(dòng)檢測(cè):通過(guò)攝像頭采集的視頻數(shù)據(jù)識(shí)別家庭內(nèi)的運(yùn)動(dòng)物體,從序列圖像中將變化區(qū)域從背景圖像中提取出來(lái)[3]。
(2)跟蹤質(zhì)心檢測(cè):在序列圖像中實(shí)時(shí)找到感興趣的運(yùn)動(dòng)目標(biāo),并跟蹤質(zhì)心[4-7]。
(3)分析識(shí)別:進(jìn)行幀間目標(biāo)特征的匹配,匹配成功則發(fā)送預(yù)警信息[8-9]。
3.1.2 語(yǔ)音識(shí)別端軟件功能
(1)ASR識(shí)別:將人類(lèi)語(yǔ)音中的詞匯內(nèi)容轉(zhuǎn)換為計(jì)算機(jī)可讀的二進(jìn)制編碼。
(2)結(jié)果確認(rèn):識(shí)別流程結(jié)束后,查看是否有識(shí)別結(jié)果。
(3)復(fù)位識(shí)別:當(dāng)LD模塊接收到音頻信號(hào)時(shí),判斷是否獲得識(shí)別結(jié)果,如果沒(méi)有則重新配置寄存器,準(zhǔn)備下一次識(shí)別。
3.1.3 發(fā)送端軟件功能
(1)建立通信連接:檢查模塊通信是否正常,配置SIM卡是否就緒,被叫號(hào)碼是否顯示,設(shè)置短消息為文本模式。
(2)發(fā)送指令:發(fā)送串口數(shù)據(jù)。
3.2 系統(tǒng)軟件設(shè)計(jì)
3.2.1 軟件總流程設(shè)計(jì)
系統(tǒng)由行為識(shí)別端、語(yǔ)音識(shí)別端、發(fā)送端構(gòu)成,攝像頭捕捉視頻圖像傳送至行為識(shí)別端后開(kāi)始工作。語(yǔ)音識(shí)別模塊捕捉聲音信息,一旦發(fā)現(xiàn)異常行為或求助語(yǔ)音,則發(fā)送端開(kāi)始工作,并將預(yù)警信息發(fā)送至監(jiān)護(hù)人手機(jī)。系統(tǒng)軟件流程如圖6所示。
3.2.2 行為識(shí)別端軟件流程設(shè)計(jì)
行為識(shí)別主要完成對(duì)視頻圖像的分析,及時(shí)分析出異常行為,預(yù)警監(jiān)護(hù)人[10-11],行為識(shí)別端軟件流程如圖7所示。
3.2.3 語(yǔ)音識(shí)別端軟件流程設(shè)計(jì)
語(yǔ)音識(shí)別端用于判斷是否存在求助語(yǔ)言,其軟件流程如圖8所示。
3.2.4 發(fā)送端軟件流程設(shè)計(jì)
發(fā)送端用于預(yù)警短信的發(fā)送,發(fā)送端軟件流程設(shè)計(jì)如圖9所示。
4 創(chuàng)新點(diǎn)分析
4.1 系統(tǒng)技術(shù)先進(jìn)
系統(tǒng)采用基于計(jì)算機(jī)視覺(jué)的人體行為識(shí)別技術(shù),是計(jì)算機(jī)視覺(jué)與模式識(shí)別領(lǐng)域內(nèi)一個(gè)新興的研究方向。
4.2 智能化應(yīng)用
本系統(tǒng)解決了視頻監(jiān)控網(wǎng)絡(luò)圖像內(nèi)容分析依靠人工實(shí)時(shí)觀看、手動(dòng)調(diào)閱的問(wèn)題,節(jié)省了人力勞動(dòng)。
4.3 成本低廉、實(shí)用性高
以ARM系列嵌入式平臺(tái)作為核心處理器,充分利用了ARM體積小、功耗低、成本低、性能優(yōu)越等特點(diǎn)。
5 結(jié) 語(yǔ)
本文完成了異常行為監(jiān)控預(yù)警系統(tǒng)的設(shè)計(jì),以ARM9微處理器為核心,將硬件傳感器模塊和系統(tǒng)軟件設(shè)計(jì)相結(jié)合,突破了當(dāng)前家政服務(wù)市場(chǎng)的監(jiān)控盲區(qū)。根據(jù)識(shí)別算法對(duì)視頻圖像進(jìn)行實(shí)時(shí)分析處理,整合監(jiān)控、行為識(shí)別及報(bào)警功能,在保姆虐待老人孩子時(shí)及時(shí)警告監(jiān)護(hù)人,提醒監(jiān)護(hù)人對(duì)突發(fā)事件進(jìn)行干預(yù),以免對(duì)其家人造成嚴(yán)重傷害或二次虐待。隨著家庭監(jiān)控市場(chǎng)的發(fā)展與普及,相信異常行為監(jiān)控預(yù)警系統(tǒng)能夠有效改善家政服務(wù)市場(chǎng)的氣象,為家庭成員提供安全
保障。
參 考 文 獻(xiàn)
[1]楊清永.智能分析技術(shù)原理及現(xiàn)狀[J].中國(guó)公共安全,2015(5):142-145.
[2]周真,苑惠娟.傳感器原理與應(yīng)用[M].北京:清華大學(xué)出版社,2011.
[3]謝敏.視頻序列圖像中運(yùn)動(dòng)目標(biāo)的分割和識(shí)別的研究[D].蘇州:蘇州大學(xué),2002.
[4]王金洋,余紅英,樊永生.基于混合高斯模型的運(yùn)動(dòng)目標(biāo)跟蹤算法[J].中國(guó)科技信息,2015(2):77.
[5]余聰.基于塊匹配的光流計(jì)算方法研究[D].南昌:南昌航空大學(xué),2014.
[6]羅德超.改進(jìn)均值漂移算法在智能視頻監(jiān)控中的應(yīng)用[D].重慶:重慶大學(xué),2010.
[7]黃超群.基于混合高斯模型和Kalman濾波器的運(yùn)動(dòng)目標(biāo)檢測(cè)與跟蹤[D].昆明:云南大學(xué),2010.
[8]李秀秀.基于目標(biāo)運(yùn)動(dòng)特征學(xué)習(xí)的行為分析[D].西安:西北工業(yè)大學(xué),2007.
[9]李志娜.智能視頻監(jiān)控中人體異常行為識(shí)別研究[D].武漢:武漢理工大學(xué),2014.
[10]徐羊元.基于多層特征融合的人體行為識(shí)別[D].重慶:西南大學(xué),2016.
[11]張廣拓.嵌入式網(wǎng)絡(luò)視頻監(jiān)控系統(tǒng)的研究與設(shè)計(jì)[D].哈爾濱:哈爾濱工程大學(xué),2007.