陳 曦，徐志宇,2

(1.同濟(jì)大學(xué)電子與信息工程學(xué)院，上海 201804;2.同濟(jì)大學(xué)計(jì)算機(jī)與信息技術(shù)國家級(jí)實(shí)驗(yàn)教學(xué)示范中心，上海 201804)

0 引言

城市流浪貓主要是指棲息于城市各大公園、社區(qū)及城鄉(xiāng)結(jié)合部的無主家貓。其來源主要是走失、遺棄和自然狀態(tài)下的無序繁殖[1]。流浪貓不僅自身健康狀況堪憂[2]，而且構(gòu)成城市衛(wèi)生防疫[3]、居民生活[4]、基礎(chǔ)設(shè)施及道路交通安全[5]的潛在威脅。由于貓科動(dòng)物活動(dòng)的隱秘性，很難對(duì)其生態(tài)進(jìn)行全面、深入的考察和數(shù)據(jù)采集。

計(jì)算機(jī)科學(xué)、人工智能與傳統(tǒng)基于數(shù)理統(tǒng)計(jì)的生物測(cè)定學(xué)(Biometrics)相結(jié)合，催生了現(xiàn)代生物識(shí)別技術(shù)。該技術(shù)早期主要以人為識(shí)別對(duì)象。VOC2006首次將動(dòng)物列為識(shí)別對(duì)象[6]。微軟、cvPaper等開放數(shù)據(jù)庫也陸續(xù)添加了各種動(dòng)物圖片數(shù)據(jù)集。動(dòng)物檢測(cè)不僅要求能夠判斷場景中是否含有目標(biāo)，而且要求精確標(biāo)記目標(biāo)出現(xiàn)的位置。Tatsuo Kozakaya提出CoHOG特征，并將其與Haar-Like特征一起送入AdaBoost分類器[7]。Akihiko Yamad提出了一種四方向特征(four directional features，F(xiàn)DF)和線性判別式分析(linear discriminant analysis，LDA)聚類算法[8]。Danai Triantafyllidou提出將生物臉部的形狀特征和紋理特征分開，分別訓(xùn)練分類器，再并聯(lián)兩個(gè)分類器，利用卷積神經(jīng)網(wǎng)絡(luò)得出最終分類結(jié)果[9]。

本文參考野生動(dòng)物科考的思路[10]，運(yùn)用機(jī)器視覺和遠(yuǎn)程通信技術(shù)，設(shè)計(jì)了一種用于城市流浪貓生態(tài)考察的監(jiān)測(cè)系統(tǒng)。通過現(xiàn)場隱蔽的攝像頭采集流浪貓活動(dòng)的影像，運(yùn)用貓臉檢測(cè)進(jìn)行分析，將疑似貓臉部分圖片通過遠(yuǎn)程通信方式上傳至監(jiān)控中心上位機(jī)。該監(jiān)測(cè)系統(tǒng)可以為動(dòng)物救助和走失寵物認(rèn)領(lǐng)提供重要依據(jù)，也可為相關(guān)科學(xué)研究提供第一手的參考資料。

1 功能定位與系統(tǒng)架構(gòu)

本文旨在開發(fā)一種能夠監(jiān)測(cè)城市流浪貓活動(dòng)的系統(tǒng)。監(jiān)測(cè)系統(tǒng)整體架構(gòu)如圖1所示。

圖1 監(jiān)測(cè)系統(tǒng)整體架構(gòu)圖Fig.1 Overall architecture of surveillance system

該系統(tǒng)由多個(gè)部署于現(xiàn)場的移動(dòng)端和一個(gè)部署于監(jiān)控中心的上位機(jī)組成。工作時(shí)，移動(dòng)端根據(jù)貓臉識(shí)別記錄影像，并經(jīng)由遠(yuǎn)程通信上傳縮略圖像至上位機(jī)。監(jiān)測(cè)數(shù)據(jù)可用于科學(xué)考察、動(dòng)物救助、丟失寵物查找等。

移動(dòng)端：硬件包括以樹莓派(Raspberry Pi)為核心的處理模塊、基于USB免驅(qū)攝像頭的圖像采集模塊、兼容3G和LoRa的通信模塊。軟件以Linux的發(fā)行版Raspberry Jessie為平臺(tái)，采用C++語言編程，并借助OpenCV和LibJpeg實(shí)現(xiàn)圖像處理和壓縮；通過調(diào)用Linux API驅(qū)動(dòng)相關(guān)通信模塊，實(shí)現(xiàn)縮略圖像發(fā)送。

上位機(jī)：硬件為一臺(tái)計(jì)算機(jī)。軟件以Win10為開發(fā)平臺(tái)，采用Python語言編程，分別調(diào)用GUI工具包PyQt、串口開發(fā)工具包PySerial、網(wǎng)絡(luò)通信工具包PySocket，實(shí)現(xiàn)界面顯示、數(shù)據(jù)接收與存儲(chǔ)，

根據(jù)應(yīng)用場景的需要，該監(jiān)測(cè)系統(tǒng)應(yīng)滿足以下性能要求。①智能性：根據(jù)采集的圖像自動(dòng)識(shí)別貓臉，自動(dòng)控制影像記錄設(shè)備的啟停，自動(dòng)選擇通信模式并向監(jiān)控中心服務(wù)器發(fā)送圖片。②遠(yuǎn)程性：現(xiàn)場移動(dòng)端與監(jiān)控中心相配合，監(jiān)控人員能夠在遠(yuǎn)程的監(jiān)控中心了解到現(xiàn)場的情況，決定是否到達(dá)現(xiàn)場對(duì)動(dòng)物或設(shè)備實(shí)施干預(yù)。③可靠性：實(shí)際應(yīng)用中，移動(dòng)端需長期部署于戶外，氣候條件復(fù)雜、溫濕度環(huán)境多變，因此要求功耗低、待機(jī)時(shí)間長、可靠耐用。④經(jīng)濟(jì)性：實(shí)際應(yīng)用中，移動(dòng)端需大量、多點(diǎn)部署；在滿足基本性能的前提下，要盡量降低購買、部署、維護(hù)成本。

2 基于紋理和五官特征的貓臉檢測(cè)

2.1 貓臉的MB-LBP特征和Haar-Like特征

局部二值模式(local binary pattern,LBP)是一種關(guān)于圖像紋理特征的描述符，將每個(gè)像素點(diǎn)與其相鄰像素比較，得到一個(gè)0/1序列，可突出強(qiáng)調(diào)圖像的局部細(xì)節(jié)特征。LBP算子具有灰度不變性和旋轉(zhuǎn)不變性[11]。為提高抗噪能力，進(jìn)一步提出“多比例塊”(multi-scale block,MB)的改進(jìn)方案，即MB-LBP。本文采用MB-LBP算子表征貓臉的紋理特征。

將圖像分為多個(gè)子區(qū)域(sub-region)。每個(gè)子區(qū)域與相鄰的8個(gè)子區(qū)域共同組成一個(gè)塊(block)。每個(gè)塊含有(s×s)個(gè)像素點(diǎn)。取子區(qū)域像素的均值為該子區(qū)域的灰度值，再通過子區(qū)域之間灰度值的比較，得到該子區(qū)域的LBP值。

子區(qū)域灰度值的均值操作，等價(jià)于對(duì)圖像的平滑處理。在此基礎(chǔ)上進(jìn)行紋理提取，使魯棒性和抗噪能力得到顯著提升。

基于MB-LBP算法的貓臉紋理檢測(cè)結(jié)果如圖2所示。

圖2 基于MB-LBP算法的貓臉紋理檢測(cè)結(jié)果Fig.2 Feature detection results of cat-face based on MB-LBP algorithm

子區(qū)域越大(s越大)，平滑效果越好，但同時(shí)也會(huì)導(dǎo)致圖像細(xì)節(jié)特征的丟失。當(dāng)子區(qū)域大小合適時(shí)，貓臉具有明顯區(qū)別于背景的紋理特征。經(jīng)試驗(yàn)測(cè)試，折中選取子區(qū)域邊長s= 5，即每個(gè)塊包含(15×15)個(gè)像素點(diǎn)。

除了紋理特征，眼部特征也可作為貓臉檢測(cè)的重要依據(jù)。根據(jù)貓眼與下眼瞼在像素灰度值之間的差異，并借鑒人臉五官特征識(shí)別的成功案例[12]，采用圖2 Haar-Like特征刻畫貓眼特征。

2.2 貓臉級(jí)聯(lián)分類器的訓(xùn)練

研究表明，在解決復(fù)雜的分類問題時(shí)，通過級(jí)聯(lián)多個(gè)分類器，并對(duì)其輸出結(jié)果進(jìn)行線性組合，可以提高分類的性能。因此，構(gòu)造2級(jí)級(jí)聯(lián)分類器：第1級(jí)為基于Haar-Lile特征的貓眼分類器，第2級(jí)為基于MB-LBP的貓臉紋理分類器。先用貓眼特征大致定位貓臉區(qū)域，再用紋理特征進(jìn)一步判斷是否為貓臉。

Adaboost是一種針對(duì)級(jí)聯(lián)分類器的訓(xùn)練算法。其核心思想是不斷尋找具有最小誤差函數(shù)的弱分類器，并在每一次弱分類之后根據(jù)分類效果調(diào)整訓(xùn)練樣本的權(quán)值分布，從而提高被錯(cuò)誤分類的樣本在下一次分類時(shí)的權(quán)值。弱分類器的級(jí)聯(lián)組成最終的強(qiáng)分類器。作為AdaBoost算法的重要改進(jìn)形式，Gentle AdaBoost采用最小二乘法對(duì)每一級(jí)弱分類器進(jìn)行優(yōu)化，可以有效降低誤分類樣本權(quán)重的上升速率，在一定程度上避免過擬合，具有更好的數(shù)值計(jì)算穩(wěn)定性。

如圖2(d)所示，當(dāng)子區(qū)域較大時(shí)(如s= 60)，MB-LBP特征與Haar-Like特征具有相似的結(jié)果，即貓眼的灰度值高于下眼瞼的灰度值。通過不同尺寸子區(qū)域的配合，可提高貓臉檢測(cè)的準(zhǔn)確率和效率。

2.3 貓臉檢測(cè)的性能測(cè)試

2.3.1 數(shù)據(jù)集

訓(xùn)練數(shù)據(jù)集中的正、負(fù)樣本分別來源于google (https://sites.google.com/site/catdatacollection/data)和cvPaper數(shù)據(jù)庫。貓眼分類器的正樣本為1 500張含貓眼部分的圖片。其中，閉眼狀態(tài)和睜眼狀態(tài)各750張；負(fù)樣本為5 000張不含貓臉的圖片。貓臉紋理分類器的正樣本為5 000張含貓臉的圖片，其中3 000張為正臉、2 000張為側(cè)臉；負(fù)樣本為15 000張不含貓臉的圖片。

測(cè)試數(shù)據(jù)集為來源于kaggle數(shù)據(jù)庫(https://www.kaggle.com/c/dogs-vs-cats-redux-kernels-edition/data)的1 000張包含貓臉的圖片。

2.3.2 測(cè)試結(jié)果

定義分類效果的評(píng)價(jià)指標(biāo)如下。①誤檢率(false positive ratio,FPR)：分類器錯(cuò)誤檢出的測(cè)試樣本數(shù)與分類器檢出測(cè)試樣本數(shù)之比。②正確率(true positive ratio,TPR)：分類器正確檢出的測(cè)試樣本數(shù)與實(shí)際含有目標(biāo)的測(cè)試樣本數(shù)之比。③檢測(cè)時(shí)間(detection time,DT)：分類器檢測(cè)640×480個(gè)像素所用的時(shí)間。

經(jīng)分別訓(xùn)練、調(diào)試貓眼和貓臉紋理這2個(gè)分類器，最終得到一個(gè)TPR= 70%、FPR= 28%、DT= 430 ms的貓臉檢測(cè)器。基于貓眼-紋理特征信息融合的貓臉檢測(cè)結(jié)果如圖3所示。這是該分類器給出的部分典型結(jié)果。

圖3 基于貓眼-紋理特征信息融合的貓臉檢測(cè)結(jié)果Fig.3 Cat-face detection results based on information fusion of ocular region and fur texture

①檢測(cè)結(jié)果對(duì)形狀不敏感：當(dāng)背景中出現(xiàn)如圖3(a)所示的類似貓臉的形狀或如圖3(b)所示的貓臉被部分遮擋時(shí)，仍可正確識(shí)別貓臉。

②檢測(cè)結(jié)果對(duì)光照不敏感：當(dāng)照片欠曝或過曝時(shí)，仍可正確識(shí)別貓臉。

③存在如圖3(d)所示的眼部、紋理特征同時(shí)類似貓臉時(shí)，可能發(fā)生誤檢。

④當(dāng)出現(xiàn)如圖3(e)所示的貓臉過度仰頭、側(cè)臉時(shí)，由于貓眼特征損失，可能發(fā)生漏檢。

3 基于3G和LoRa的遠(yuǎn)程通信

城市流浪貓監(jiān)測(cè)的應(yīng)用場景，要求移動(dòng)端將檢測(cè)到的貓臉圖像發(fā)送至較遠(yuǎn)距離的上位機(jī)，并盡量降低通信功耗，延長待機(jī)時(shí)間。因此，本文給出3G和LoRa這2種遠(yuǎn)程無線通信方案。實(shí)際應(yīng)用時(shí)，可根據(jù)現(xiàn)場網(wǎng)絡(luò)信號(hào)狀況靈活選擇。

3.1 3G通信方案

當(dāng)移動(dòng)端的部署地點(diǎn)的蜂窩信號(hào)覆蓋情況良好且交通便利時(shí)，為便于更換電池，功耗問題退居次要矛盾。此時(shí)可選用3G通信方式，即移動(dòng)端利用3G無線通信技術(shù)將圖片發(fā)送至服務(wù)器的IP地址。3G通信方式可以很好地保證圖像傳輸?shù)目焖傩裕琓CP/IP協(xié)議又能很好地保證圖像傳輸?shù)目煽啃?。監(jiān)控人員可在服務(wù)器端獲取更多的圖像信息。

為了讓移動(dòng)端通過3G模式訪問互聯(lián)網(wǎng)，本文在移動(dòng)端連接了3G模塊。3G模塊通過USB接口與樹莓派相連。移動(dòng)端借助該模塊訪問服務(wù)器的IP地址，并向其發(fā)送圖像信息。

3.2 LoRa通信方案

當(dāng)移動(dòng)端的部署地點(diǎn)無蜂窩信號(hào)覆蓋，或相對(duì)偏遠(yuǎn)、供電困難時(shí)，功耗問題上升為主要矛盾。此時(shí)應(yīng)選用LoRa擴(kuò)頻方式傳輸圖像。相比于3G方案，LoRa方案的功耗顯著降低，待機(jī)時(shí)間大大延長，減輕了更換電池的負(fù)擔(dān)。但其代價(jià)是數(shù)據(jù)傳輸速率較慢，監(jiān)控人員在上位機(jī)僅能獲得圖像的部分信息。

LoRa通信通過在移動(dòng)端和服務(wù)器端分別連接LoRa擴(kuò)頻無線串口模塊實(shí)現(xiàn)。LoRa擴(kuò)頻模塊同樣通過USB接口與樹莓派相連，接收端模塊與服務(wù)器相連。在LoRa傳輸?shù)姆秶畠?nèi)，移動(dòng)端可通過訪問接收端的地址向服務(wù)器發(fā)送數(shù)據(jù)。

4 樣機(jī)制作與現(xiàn)場測(cè)試

為完成系統(tǒng)的整體性能測(cè)試，制作了監(jiān)測(cè)系統(tǒng)移動(dòng)端樣機(jī)；上位機(jī)則為普通計(jì)算機(jī)，主要涉及軟件開發(fā)工作，即編程完成圖像數(shù)據(jù)的接收、存儲(chǔ)，并在監(jiān)控界面顯示。

測(cè)試條件：同濟(jì)大學(xué)嘉定校區(qū)智信館南側(cè)庭院，上午10:00～11:00，天氣晴朗。此處為校園流浪貓的集中棲息地之一。

測(cè)試流程：通過攝像頭讀入含有貓臉的圖像，檢測(cè)其中的貓臉部分，將圖片壓縮后上傳至上位機(jī)，并在監(jiān)控界面中顯示。由于3G通信的傳輸可靠性與范圍依賴于現(xiàn)場周圍蜂窩基站的分布，因此本文主要測(cè)試LoRa通信性能。

定義3項(xiàng)通信性能指標(biāo)。①傳輸時(shí)延：接收到完成圖像接收和發(fā)送端開始發(fā)送圖像的時(shí)間差。②傳輸距離：接收模塊和發(fā)送模塊間隔距離。③傳輸可靠性：完成完整的圖片傳輸?shù)臄?shù)量和發(fā)送端發(fā)送的圖片數(shù)量之比。

測(cè)試場地為室外空曠地帶，中間無明顯障礙物，設(shè)定傳輸速率為0.3 kbit/s；測(cè)試方案采用移動(dòng)端發(fā)送5張1 kB左右的圖片，在上位機(jī)檢驗(yàn)圖片的接收狀況。監(jiān)測(cè)系統(tǒng)移動(dòng)端與上位機(jī)采用LoRa通信模式傳輸圖像的性能測(cè)試結(jié)果如表1所示。

表1 性能測(cè)試結(jié)果Tab.1 Results of performance test

監(jiān)測(cè)系統(tǒng)的整體功能驗(yàn)證效果良好。移動(dòng)端通過圖像識(shí)別，可準(zhǔn)確檢測(cè)流浪貓活動(dòng)；經(jīng)3G或LoRa遠(yuǎn)程通信方式，可將圖像傳輸至上位機(jī)監(jiān)控界面顯示。

5 結(jié)束語

本文綜合運(yùn)用計(jì)算機(jī)視覺和遠(yuǎn)程通信技術(shù)，開發(fā)了一種用于城市流浪貓生態(tài)考察的監(jiān)測(cè)系統(tǒng)。該系統(tǒng)由移動(dòng)端和上位機(jī)組成，分別部署于現(xiàn)場和監(jiān)控中心。移動(dòng)端基于樹莓派平臺(tái)，通過攝像頭偵測(cè)流浪貓活動(dòng)，構(gòu)建了2級(jí)級(jí)聯(lián)器，分別基于Haar-Like特征和MB-LBP特征，將貓眼特征與紋理特征相結(jié)合，并運(yùn)用Gentle AdaBoost算法加以訓(xùn)練。標(biāo)準(zhǔn)數(shù)據(jù)集測(cè)試顯示貓臉檢測(cè)的正確率為70%，誤檢率為28%。進(jìn)一步制作的樣機(jī)，可根據(jù)現(xiàn)場蜂窩網(wǎng)覆蓋情況，選擇3G或LoRa方式實(shí)現(xiàn)遠(yuǎn)程圖像傳輸?，F(xiàn)場測(cè)試結(jié)果證實(shí)了系統(tǒng)各項(xiàng)功能的有效性。