韋 為 ，謝聲揚(yáng) ，陸俊帆 ，寧志朋 ，何桂尖 ，隋明君 ，盧羅芳

（1.桂林航天工業(yè)學(xué)院，廣西 桂林 541004；2.廣西大學(xué)，廣西 南寧 530004）

0 引言

目前我國(guó)在果樹(shù)的農(nóng)藥噴灑領(lǐng)域主要是用人工作業(yè)的方式進(jìn)行噴灑，該方法不僅耗費(fèi)大量人力物力，而且效率也極為低下。基于果樹(shù)圖像識(shí)別的無(wú)人機(jī)農(nóng)藥噴灑空間定位研究仍然較少[1-2]。農(nóng)作物的圖像識(shí)別方法主要是采用在RGB顏色空間內(nèi)，目標(biāo)圖像與背景顏色的區(qū)別，設(shè)定一個(gè)顏色閾值將農(nóng)作物所占的顏色像素與背景物的顏色像素相分離，最終達(dá)到農(nóng)作物圖像識(shí)別的目的[3]。但針對(duì)果樹(shù)的圖像識(shí)別方法目前還不是特別成熟[4-7]。

果園會(huì)根據(jù)果樹(shù)的種類(lèi)不同而采用不同的種植間隔，不同果樹(shù)的樹(shù)冠直徑也不同，其空間分布的復(fù)雜程度將會(huì)對(duì)無(wú)人機(jī)進(jìn)行精確農(nóng)藥噴灑造成較大影響。本文以芒果樹(shù)為研究對(duì)象，通過(guò)CCD攝像頭拍照，然后應(yīng)用圖像識(shí)別的方法，獲得無(wú)人機(jī)噴灑農(nóng)藥的理想空間位置。對(duì)提高果樹(shù)的農(nóng)藥噴灑效率有較高的實(shí)際應(yīng)用價(jià)值。

1 定位識(shí)別的基本原理

圖像識(shí)別的基本過(guò)程為：將CCD攝像頭安裝在植保無(wú)人機(jī)下方懸掛點(diǎn)處。開(kāi)啟圖像識(shí)別程序，開(kāi)啟CCD攝像頭，操控植保無(wú)人機(jī)飛往芒果樹(shù)上方。用LABVIEW軟件編寫(xiě)上位機(jī)軟件平臺(tái)開(kāi)始調(diào)用CCD攝像頭拍照的圖像，從高空拍攝若干棵樹(shù)的樹(shù)冠圖像，并進(jìn)行圖像預(yù)處理，如若圖像的預(yù)處理效果不理想，則輸出相應(yīng)飛行指令，微調(diào)無(wú)人機(jī)飛行方位，直至圖像預(yù)處理結(jié)果理想為止。

將預(yù)處理理想的圖像經(jīng)由圖像識(shí)別程序進(jìn)行處理，提取圖片內(nèi)若干棵樹(shù)的大致輪廓，并通過(guò)程序算法去除多余的干擾物，而后標(biāo)記出每棵樹(shù)的質(zhì)心。選取其中一棵樹(shù)的質(zhì)心點(diǎn)，使其與屏幕中心點(diǎn)基本對(duì)齊，從而確定無(wú)人機(jī)施藥的XY位置。輸入指令，將無(wú)人機(jī)調(diào)至施藥高度，系統(tǒng)通過(guò)果樹(shù)輪廓的面積與世界坐標(biāo)的對(duì)應(yīng)比例，判斷出樹(shù)頂與植保無(wú)人機(jī)的大致高度以及樹(shù)冠的大致直徑，實(shí)現(xiàn)自動(dòng)控制無(wú)人機(jī)的路徑規(guī)劃以及施藥高度。具體原理流程如圖1所示。

圖1 定位識(shí)別原理流程圖

2 識(shí)別具體算法及實(shí)施

2.1 圖像預(yù)處理

芒果樹(shù)的圖像預(yù)處理是圖像識(shí)別最重要的一步，主要目的是為了消除照片的雜亂信息。照片屬于彩色照片，芒果樹(shù)的樹(shù)葉以綠色為主。在實(shí)際情況中，種植芒果樹(shù)的果園通常會(huì)以固定的植株距離去種植芒果樹(shù)。但是由于果園的地理環(huán)境、天氣因素等外界因素的不同，通過(guò)芒果樹(shù)照片其樹(shù)葉可能受到陰影的干擾從而導(dǎo)致顏色與預(yù)期的綠色有所差異。若果園所確定的種植株距較密，則樹(shù)木與樹(shù)木之間很可能存在著樹(shù)葉的大量交集，并且圖像的背景物顏色也可能與樹(shù)葉大致相同。目前的識(shí)別方法主要是區(qū)分目標(biāo)物與背景物的顏色，從而進(jìn)行目標(biāo)圖像與背景物圖像的分割。當(dāng)干擾物的綠色分量與樹(shù)葉的綠色分量數(shù)值接近的時(shí)候，很可能會(huì)產(chǎn)生誤識(shí)別，這對(duì)圖像預(yù)處理有較大影響。對(duì)于部分種植株距大，背景物與芒果樹(shù)色差相對(duì)較大的果園，采用RGB顏色空間進(jìn)行圖像預(yù)處理是可行的，但是對(duì)于存在上述干擾情況的芒果園來(lái)說(shuō)，采用RGB空間的圖像預(yù)處理方法則是不可行的。

嘗試把圖像預(yù)處理的方法從常規(guī)的RGB顏色空間轉(zhuǎn)換為HSV空間。HSV空間的三個(gè)分量H（色調(diào)）、S（飽和度）、V（亮度）相對(duì)于RGB的三個(gè)分量來(lái)說(shuō)，相互關(guān)聯(lián)度更小，更有利于芒果樹(shù)的圖像預(yù)處理。對(duì)芒果樹(shù)的預(yù)處理操作主要包括：圖像二值化處理、圖像膨脹處理、圖像較小面積元?jiǎng)h除處理、圖像連通區(qū)域質(zhì)心標(biāo)記處理等。圖像預(yù)處理過(guò)程如圖2所示，進(jìn)行小面積元?jiǎng)h除時(shí)可能會(huì)忽略某些面積相對(duì)較大的孔洞區(qū)域，此時(shí)可用WHITE循環(huán)檢測(cè)連通域的數(shù)量，進(jìn)而將其刪除。

圖2 圖像預(yù)處理過(guò)程

2.2 無(wú)人機(jī)施藥位置的路徑規(guī)劃

在圖像預(yù)處理的基礎(chǔ)上，采用質(zhì)心點(diǎn)與屏幕中心點(diǎn)重合的方法，實(shí)現(xiàn)路徑規(guī)劃功能。具體規(guī)劃方法如下：圖像以左下角為原點(diǎn)，建立相對(duì)坐標(biāo)系。將目標(biāo)圖像質(zhì)心坐標(biāo)與屏幕中心坐標(biāo)提取出來(lái)，并利用公式1，將質(zhì)心坐標(biāo)與中心坐標(biāo)的相對(duì)距離計(jì)算出來(lái)。見(jiàn)圖3.

圖3 果樹(shù)中心標(biāo)定與對(duì)位流程圖

其中s為兩點(diǎn)之間的距離，x1、y1為中心點(diǎn)的相對(duì)坐標(biāo)，x2、y2為質(zhì)心點(diǎn)的相對(duì)坐標(biāo)。利用LABVIEW軟件編寫(xiě)條件語(yǔ)句程序：若x1-x2＞0，y1-y2＞0，則對(duì)無(wú)人機(jī)輸入向左下方移動(dòng)的指令；若x1-x2＞0，y1-y2＜0，則對(duì)無(wú)人機(jī)輸入向左上方移動(dòng)的指令；若x1-x2＜0，y1-y2＞0，則對(duì)無(wú)人機(jī)輸入向右下方移動(dòng)的指令；若 x1-x2＜ 0，y1-y2＜ 0，則對(duì)無(wú)人機(jī)輸入向右上方移動(dòng)的指令。由于攝像機(jī)是逐幀拍攝的，則圖片與圖片之間存在時(shí)間滯后，因此中心點(diǎn)與質(zhì)心點(diǎn)無(wú)法完全重合。對(duì)此，也為了節(jié)省識(shí)別時(shí)間，可以設(shè)定一個(gè)距離偏差范圍｜δ｜，即當(dāng)中心點(diǎn)與質(zhì)心點(diǎn)的距離s處于該偏差｜δ｜的范圍內(nèi)時(shí)，可認(rèn)為中心點(diǎn)與質(zhì)心點(diǎn)基本重合。若s滿(mǎn)足條件，則對(duì)無(wú)人機(jī)輸入懸停指令。至此，下調(diào)無(wú)人機(jī)高度，通過(guò)調(diào)用MATLAB程序判斷連通域的面積，若當(dāng)面積達(dá)到預(yù)定值，則再次對(duì)無(wú)人機(jī)輸入懸停指令。此時(shí)無(wú)人機(jī)所在的位置即預(yù)想的施藥位置。

由于果樹(shù)種植間隙大致相同，因此可以首先人工將無(wú)人機(jī)懸停至適當(dāng)位置，隨后通過(guò)識(shí)別系統(tǒng)進(jìn)行識(shí)別，待識(shí)別完成后將無(wú)人機(jī)往某一方向固定飛行固定距離，此時(shí)無(wú)人機(jī)大致懸停在下一棵樹(shù)的上方，對(duì)此再利用識(shí)別系統(tǒng)進(jìn)行識(shí)別，以此不斷重復(fù)即可實(shí)現(xiàn)無(wú)人機(jī)施藥位置的路徑規(guī)劃。

2.3 確定施藥高度

芒果樹(shù)的樹(shù)冠直徑實(shí)際值是通過(guò)相機(jī)標(biāo)定的方法獲得的。在實(shí)際測(cè)量的過(guò)程中，由于受到地理?xiàng)l件約束，果園中的芒果樹(shù)之間高度是大致相同的，因此只要大致設(shè)定無(wú)人機(jī)與樹(shù)冠的高度，就可以不用考慮重新進(jìn)行相機(jī)標(biāo)定和相機(jī)畸變系數(shù)的影響。若想要使得相機(jī)標(biāo)定的精確度越高，則需要處理的圖片數(shù)量就要越多。處理的圖片達(dá)到10張以上便可達(dá)到預(yù)期的效果。

通過(guò)圖像預(yù)處理所獲得的芒果樹(shù)大致圖像，可以利用LABVIEW軟件進(jìn)行芒果樹(shù)實(shí)際直徑的大致標(biāo)定。其中，求取芒果樹(shù)實(shí)際直徑的方法如下：設(shè)芒果樹(shù)圖像相對(duì)面積為S′，絕對(duì)面積為S，無(wú)人機(jī)絕對(duì)高度為H，樹(shù)木絕對(duì)高度為H′，根據(jù)預(yù)先設(shè)定的拍攝距離為H和H′相減，通過(guò)芒果樹(shù)樹(shù)冠的絕對(duì)面積S與相對(duì)面積S′確定比例關(guān)系k=S/S′，得到芒果樹(shù)絕對(duì)面積S=S′×k.由于芒果樹(shù)的絕對(duì)面積大小大致不變，因此可認(rèn)為k的值也是大致保持不變。通過(guò)試驗(yàn)去測(cè)出k的值，進(jìn)而確定芒果樹(shù)的相對(duì)面積閾值范圍，若圖像中連通域的面積達(dá)到了該閾值范圍，即可認(rèn)為無(wú)人機(jī)達(dá)到了預(yù)想的施藥高度。

3 實(shí)驗(yàn)分析

3.1 搭建實(shí)驗(yàn)平臺(tái)

由于客觀因素的限制，本文通過(guò)搭建實(shí)驗(yàn)臺(tái)的方式進(jìn)行模擬實(shí)驗(yàn)，如圖4所示，具體實(shí)驗(yàn)方法如下：用樹(shù)木模型代替真實(shí)樹(shù)木，使用相機(jī)在適當(dāng)高度拍攝樹(shù)木模型的俯視圖，之后將照片輸入電腦中，利用MATLAB軟件進(jìn)行仿真模擬。利用IF語(yǔ)句判斷出樹(shù)木中心點(diǎn)與照片中心點(diǎn)的相對(duì)位置，然后利用While循環(huán)，通過(guò)坐標(biāo)點(diǎn)移動(dòng)代替現(xiàn)實(shí)中的無(wú)人機(jī)移動(dòng)。本實(shí)驗(yàn)中規(guī)定每次移動(dòng)的距離為圖像橫坐標(biāo)最大值的4%.若兩坐標(biāo)點(diǎn)的相對(duì)距離s小于等于某一閾值范圍，則停止循環(huán)，并輸出懸停指令。由于每張相片的大小存在差異，其坐標(biāo)的大小也存在著差異。在實(shí)驗(yàn)中規(guī)定s的閾值范圍。通過(guò)記錄循環(huán)次數(shù)N來(lái)模擬無(wú)人機(jī)飛行的次數(shù)。實(shí)驗(yàn)中，可以通過(guò)調(diào)整室內(nèi)光線(xiàn)亮度去代替現(xiàn)實(shí)中的光照強(qiáng)度、更換樹(shù)葉顏色代替不同季節(jié)的樹(shù)葉顏色。

圖4 實(shí)驗(yàn)平臺(tái)搭建圖

3.2 實(shí)驗(yàn)結(jié)果與分析

圖像識(shí)別結(jié)果如圖5所示，其中，加號(hào)為屏幕中心點(diǎn)，乘號(hào)為無(wú)人機(jī)農(nóng)藥彈投放點(diǎn)，黑點(diǎn)為樹(shù)冠中心點(diǎn)。

圖5 圖像識(shí)別結(jié)果圖

通過(guò)對(duì)70棵樹(shù)木模型進(jìn)行實(shí)驗(yàn)分析，實(shí)驗(yàn)結(jié)果如表1所示。

表1 實(shí)驗(yàn)結(jié)果

在本次實(shí)驗(yàn)過(guò)程中，一共選定了70棵芒果樹(shù)模型進(jìn)行測(cè)定，其中拍攝了420張照片，識(shí)別成功的照片有358張，正確率達(dá)到了85%以上。特別是在大種植間隙的情況下，其識(shí)別成功率更是高達(dá)97.2%.

從表1可以看出，在進(jìn)行晴天與陰天環(huán)境模擬時(shí)，發(fā)現(xiàn)陰天環(huán)境下的識(shí)別率較晴天環(huán)境下的高，其原因是因?yàn)殛幪飙h(huán)境下，背景干擾物的顏色較暗，在進(jìn)行預(yù)處理的時(shí)候能較好的分割出來(lái)。同時(shí)，在進(jìn)行小種植間隙類(lèi)型果園的識(shí)別時(shí)，需將H分量的閾值范圍縮小，從而避免圖像在進(jìn)行預(yù)處理時(shí)，主樹(shù)木與干擾樹(shù)木之間形成相同連通域，導(dǎo)致后續(xù)處理時(shí)出現(xiàn)誤差。

4 結(jié)束語(yǔ)

通過(guò)圖像識(shí)別方法，本文完成了芒果樹(shù)的無(wú)人機(jī)施藥的空間定位分析：

（1）通過(guò)HSV空間進(jìn)行H值分割，去除了背景物的干擾，綜合運(yùn)用了多種圖像處理方法，多次運(yùn)用膨脹、刪除面積元、質(zhì)心標(biāo)記等方法實(shí)現(xiàn)了較為理想的圖像預(yù)處理。

（2）利用中心點(diǎn)重合的方法與相機(jī)標(biāo)定的方法確定了無(wú)人機(jī)的施藥位置，為實(shí)現(xiàn)無(wú)人機(jī)施藥的自動(dòng)化路徑規(guī)劃提供了可靠的依據(jù)。