郭麗新

摘要：黃花菜要實現(xiàn)智能機械化的采摘，其機器視覺的研究必不可少。本文依據(jù)國內(nèi)采摘外機器人視覺系統(tǒng)的發(fā)展現(xiàn)狀并結(jié)合黃花菜自身的特征，對黃花菜機器人的機器視覺技術(shù)作出展望，使采摘視覺系統(tǒng)能夠滿足黃花菜機器人的作業(yè)要求，對黃花菜實現(xiàn)智能化、無人化采摘具有重要的現(xiàn)實意義。

關(guān)鍵詞：視覺系統(tǒng) 黃花菜機器人 識別 定位

1 采摘機器人的機器視覺發(fā)展現(xiàn)狀

澳大利亞Arefi通過使用RGB、HIS和YIQ顏色空間的組合方法識別成熟番茄果實，最后通過形態(tài)學特征定位果實;西班牙科學家依據(jù)柑橘外形研制出由采摘手、彩色視覺系統(tǒng)和超聲傳感器三部分組成的柑橘采摘機器人;美國的Whittaker認為對于目標與背景顏色相似的系統(tǒng)不能單純的使用顏色信息，還需要考慮顏色值在局部像素與整體當中的內(nèi)在關(guān)系，同時所摘果實形狀的信息也不能忽略，所以提出Hough變換定位番茄果實的方法;中國農(nóng)業(yè)大學李偉團隊利用近紅外光譜實現(xiàn)黃瓜果實識別，雙目視覺系統(tǒng)對目標果實完成空間坐標的獲取;張麗等利用計算機控制CCD攝像頭采集圖像，對采集的圖像進行二值化、膨脹腐蝕等處理，從而將櫻桃的成熟度、枝葉等分離開來;顧蘇杭等提出一種顯著性輪廓識別方法，通過K聚類將蘋果圖像分為背景和目標區(qū)域，引入ASIFT 特征對劃分的目標區(qū)域進行空洞填充，最后進行邊緣檢測、閾值分割、去噪、提取目標輪廓從而實現(xiàn)蘋果果實的識別。

2 黃花菜機器人視覺系統(tǒng)的研究

由于黃花菜品質(zhì)好、味道美、富含各種各樣人體需求的營養(yǎng)，其胡蘿卜素含量甚至比番茄高幾倍，新鮮黃花菜由于富含卵磷脂，具有益腦和防衰作用，是體內(nèi)許多細胞，特別是腦細胞的組成部分，對保養(yǎng)增強和改善腦功能起著非常重要作用。隨著黃花菜藥用價值的發(fā)現(xiàn)，食用人群增加，且黃花菜抗旱、耐貧瘠、容易成活，黃花菜的栽種范圍越來越大，是農(nóng)民的收入來源之一。預(yù)計2021年，我國黃花菜產(chǎn)量將達到15.7萬噸，我國黃花菜消費量將達到15.5萬噸。為解決黃花菜種植規(guī)模的增加而導(dǎo)致的采摘問題，需要開發(fā)黃花菜機器人。而黃花菜機器人實現(xiàn)采摘的第一步就是要能夠準確識別采摘目標，其視覺系統(tǒng)的研究至關(guān)重要。

根據(jù)黃花菜自身形狀特性，對其視覺系統(tǒng)分析研究。黃花菜成熟時呈嫩黃色，與青色的未成熟黃花菜和綠色的枝葉顏色存在明顯的差異，所以可采用RGB模型來實現(xiàn)對黃花菜圖像的識別與處理。RGB模型是當前計算機中應(yīng)用最普遍、最基礎(chǔ)的色彩空間模型，其中R的含義是紅色通道，G表示綠色通道，B代表藍色通道，該顏色空間最大的優(yōu)勢就在于在采集黃花菜圖像后不必進行額外的顏色空間轉(zhuǎn)化處理，這樣大大節(jié)省了時間。由圖1可知，在圖像中處理的黃花菜多為嫩黃色和青色，為了使圖像的亮度明顯，采用加權(quán)平均法完成圖像灰度處理;采用中值濾波的方法，該方法根據(jù)窗口內(nèi)所有像素點進行灰度值排序，該技術(shù)屬非線性處理，其目的是抑制圖像中的脈沖噪聲，所以選擇太大的窗口會影響圖像的邊緣信息。根據(jù)黃花菜外型呈細長橢圓、彎曲、有柄形狀對圖像進行處理，加入噪聲使圖像對比明顯易于進行處理，最后選用處理速度快，分割效果好和凸顯目標的基于灰度直方圖的Ostu自適應(yīng)閾值分割算法對黃花菜圖像進行分割處理。

上述圖像處理只是把黃花菜從圖像中分割出來，對于其特征量并沒有進行提取。目前，大多數(shù)圖像識別算法完成識別都是依據(jù)目標物的特征值，對于未提取目標物的特征值并不適用。因此，可以根據(jù)黃花菜的特點采用具有深度學習卷積神經(jīng)網(wǎng)絡(luò)算法建立識別系統(tǒng)。首先，在構(gòu)建網(wǎng)絡(luò)結(jié)構(gòu)時輸入黃花菜的特性添加多層隱層以達到預(yù)期的處理效果，使網(wǎng)絡(luò)具有深度學習特性;并且要引用較小的卷積核使各層之間緊密連接同時兼顧了算法的拓展性。具有深度自學習機制的卷積神經(jīng)網(wǎng)絡(luò)與傳統(tǒng)的BP神經(jīng)網(wǎng)絡(luò)相比，在自然環(huán)境下獲取的圖像中識別成熟的黃花菜準確率要高。

完成了黃花菜機器人視覺系統(tǒng)中的圖像處理以及對目標果實的提取，最關(guān)鍵的一步還需要完成對目標果實的定位。使用雙目相機一方面實現(xiàn)了對黃花菜圖像的采集，另一方面還要實現(xiàn)黃花菜的空間定位，就需要找出所采圖像中二維空間與三維空間之間的對應(yīng)關(guān)系。我們以被動方式來采集圖像信息，采用多圖重構(gòu)三維的方法進行場景的復(fù)原和目標的定位。該方法中的普通立體視覺猶如人類的雙眼，指的是通過兩個相機同時采集圖像，因為它們擁有一樣的幾何結(jié)構(gòu)，就可以避免外界一些不必要的干擾，更加適用于自然環(huán)境中采集圖像，實現(xiàn)對目標果實的定位。

3 總結(jié)

根據(jù)黃花菜的顏色以及外形進行定性分析并對采集到的圖像進行預(yù)處理，并且通過卷積神經(jīng)網(wǎng)絡(luò)的訓(xùn)練學習，能夠?qū)D片中出現(xiàn)的成熟的黃花菜位置進行識別。對黃花菜機器人當中的視覺系統(tǒng)進行研究，使黃花菜采摘的智能化、機械化成為可能。但對黃花菜果實的識別和定位算法所存在的問題，未來還應(yīng)該針對以下幾個問題展開研究：

由于栽種的黃花菜品種不同，所以需要對黃花菜的形狀與栽培模式進行分類，建立符合某一類別特征的黃花菜識別與定位算法，使該算法對這一類黃花菜的識別與定位的準確性具有良好的適應(yīng)性，這樣可以達到算法準確性和普適性提高的目的。

另一方面，加大樣本的采集，因為神經(jīng)網(wǎng)絡(luò)訓(xùn)練的樣本量越多，所建立的識別系統(tǒng)也就越精準。對于圖像中存在多個目標物的識別，尤其是在遮擋的問題上，隨著深度學習理論的不斷發(fā)展與改進，圖像數(shù)據(jù)的處理可模擬人腦的邏輯思維來完成，算法的智能化可進一步得到提升。

視覺系統(tǒng)是黃花菜機器人采摘實現(xiàn)的重要組成部分，其性能好壞決定了黃花菜機器人采摘的效率、速度和質(zhì)量，同時也是黃花菜機器人成功研制的關(guān)鍵一步。因此，提高黃花菜機器人視覺系統(tǒng)的工作性能對于推進黃花菜機器人的發(fā)展具有重要的意義。

參考文獻

[1]項榮，應(yīng)義斌，蔣煥煜.田間環(huán)境下果蔬采摘快速識別與定位方法研究進展[J].農(nóng)業(yè)機械學報，2013，44（11）：208-223.

[2]孟祥利.近色背景下溫室青椒目標視覺識別技術(shù)研究[D].江蘇大學，2018.

[3]金保華，殷長魁，張衛(wèi)正，等.基于機器視覺的蘋果園果實識別研究綜述[J].輕工學報，2019，34（02）：71-81.

[4]程祥云，宋欣.果蔬采摘機器人視覺系統(tǒng)研究綜述[J].浙江農(nóng)業(yè)科學，2019，60（03）：490-493.

[5]李立新，高德武，王笑峰，孫雪文，勇力波，李日新.黃花菜的特征特性及栽培技術(shù)[J].現(xiàn)代農(nóng)業(yè)科技，2019（01）：83-87.

[6]李慧瑤.黃花菜的多種價值及傳統(tǒng)加工工藝的綜述[J].農(nóng)家參謀，2018（21）：48-92.

[7]張小俊，劉歡歡，趙少魁，等.機器人智能化研究的關(guān)鍵技術(shù)與發(fā)展展望[J].機械設(shè)計，2016，33（08）：1-7.

項目

北方民族大學研究生創(chuàng)新項目，項目編號：YCX19095。