亚洲免费av电影一区二区三区,日韩爱爱视频,51精品视频一区二区三区,91视频爱爱,日韩欧美在线播放视频,中文字幕少妇AV,亚洲电影中文字幕,久久久久亚洲av成人网址,久久综合视频网站,国产在线不卡免费播放

        ?

        基于立體視覺技術(shù)的家政機器人抓取技術(shù)研究

        2021-04-10 14:31:41丁雪梅任柏寒
        新型工業(yè)化 2021年12期
        關(guān)鍵詞:慣性導(dǎo)航描述符操作員

        丁雪梅,任柏寒

        (吉林建筑科技學(xué)院,吉林 長春 130000)

        0 引言

        立體視覺匹配技術(shù)[1]的區(qū)域匹配是將大視角圖像轉(zhuǎn)化為許多塊狀圖像或改變圖像對的尺度大小來劃分對應(yīng)的區(qū)域,但是不同的視角會獲得不同的圖像,就會導(dǎo)致對同一環(huán)境產(chǎn)生多個不同的圖像,從而難以進行區(qū)分,同時會使得對比過程中出現(xiàn)糊圖現(xiàn)象,導(dǎo)致對大視角圖像[2]中的區(qū)域進行識別較為困難,對上述問題通過以下算法步驟嘗試解決:

        1 通過區(qū)域匹配算法確定家政機器人活動范圍以及初步判定抓取物品

        第一步:檢測并擬合兩幅待匹配圖像的最大穩(wěn)定極值區(qū)域[3],然后,對擬合的橢圓區(qū)域進行歸一化,然后對歸一化的圓形區(qū)域進行SIFT描述[4],得到128維SIFT描述符,將SIFT描述符的最近鄰與次最近鄰之比小于某個閾值(閾值設(shè)置為0.85)的區(qū)域?qū)τ米鞒跏计ヅ鋮^(qū)域?qū)Γ?/p>

        第二步:采用高斯差分特征檢測方法對匹配區(qū)域內(nèi)的特征點進行檢測,準(zhǔn)確獲取特征點的位置信息和尺度信息;

        第三步:在特征點尺度所在的高斯圖像上,構(gòu)造以特征點為中心的橢圓鄰域,對鄰域進行歸一化,然后對歸一化的圓形區(qū)域進行SIFT描述,得到基于mser的128維SIFT描述符;

        第四步:對mser區(qū)域[5]所有的特征點進行一體化,并將其進一步歸一為單位圓,得到二維空間描述符(包括距離描述符和角度描述符),這種二維空間描述符具有仿射不變性的,此時對圖像處理的方法結(jié)合了區(qū)域匹配和點匹配;

        第五步:通過獲得的基于mser的sift描述符和基于mser的二維空間描述符構(gòu)造綁定距離,然后利用綁定距離的相似性策略得到最終正確的匹配點對。

        區(qū)域匹配通過給定同一場景的兩幅圖像,然后進行粗尺度上圖像對之間對比,對比成功就代表該圖像對應(yīng)的區(qū)域為可清潔區(qū)域,在對比過程中的差異部分進行保留。如果將圖像對空間劃分許多圖像單位,則與劃分之前相比,圖像單位中的任何圖對應(yīng)圖像單位的相似度都會提升。

        在匹配區(qū)域的算法內(nèi),首先用尺度不變的dog檢測器提取特征點,然后用描述子描述特征點,其中包括新描述符集成了基于mser的SIFT描述和基于mser的空間描述符,兩者都具有仿射不變性?;趍ser的Sift描述符使用基于mser的自適應(yīng)橢圓區(qū)域代替圓形區(qū)域來描述特征點。主方向sift描述子的設(shè)置和計算在自適應(yīng)橢圓區(qū)域的歸一化圓區(qū)域內(nèi),保證了描述子的仿射不變性。基于mser的空間描述符由標(biāo)尺組成,度不變特征點由其所屬的歸一化mser單位圓區(qū)域中的空間信息組成。最后采用結(jié)合距離的相似性策略,得到正確的匹配點對。其中組合距離考慮了光學(xué)和多個因素,匹配信息使匹配更加準(zhǔn)確。

        2 通過特征匹配算法對區(qū)域匹配的差異部分進行二次匹配

        在對差異區(qū)域進行二次對比分析時,先是記錄多種常見生活垃圾的圖像作為第一份圖像,然后提取第二幅圖像中每個特征點的可能范圍,形成一幅小圖像,然后檢測小區(qū)域中是否有特征點。如果找到特征點,將特征點放在一個容器中,將第一幅圖像中的對應(yīng)點放在另一個容器中;如果在該區(qū)域中未找到特征點,則顯示第一幅圖像,并丟棄圖像的對應(yīng)點。然后,匹配兩個容器中的特征點,從而判斷是否對第二幅圖像中的物體進行抓取。

        對區(qū)域匹配產(chǎn)生并記錄的差異區(qū)域進行二次匹配,此時利用慣性導(dǎo)航信息可以提高特征匹配速度,減少誤匹配。由于感知導(dǎo)航系統(tǒng)通常是通過匹配圖像的特征點來實現(xiàn)的,為了通過獲得的圖像獲得穩(wěn)定的姿態(tài),需要提取穩(wěn)定的特征點進行狀態(tài)變化估計,但大量的特征描述符會導(dǎo)致匹配速度變慢;同樣,特征匹配也會受到不匹配的限制,從而降低姿態(tài)估計的效率。通過利用固定在相機上的慣性導(dǎo)航提供的姿態(tài)[6],可以縮小特征匹配時的搜索范圍,從而提高時間效率,減少成本失配。利用慣性導(dǎo)航提供的數(shù)據(jù),通過旋轉(zhuǎn)矩陣和平移向量將圖像中的特征點投影到第二幅圖像中,形成核心線。這條核心線提供了一個尋找可能匹配的特征點的區(qū)域,它減少了用于特征比較的特征描述符的數(shù)量,并減少了錯誤匹配。時間效率和失配是影響匹配的兩個主要因素,直接影響相機姿態(tài)估計的速度和精度。

        主要有四種基于特征的圖像匹配方法:

        (1)對圖像的特征點進行匹配。圖像特征點匹配包括建立模板與待匹配圖像,計算特征點集之間的點對點對應(yīng)關(guān)系,并計算對應(yīng)點之間的相似度來判斷圖像是否匹配和點對點匹配,點對點匹配為無顯示的方式,其主要包括最小均方差匹配。

        (2)對圖像的邊緣線進行匹配。邊緣線[7]通過邊緣檢測[8]得到,在對比時將對比的圖像塊進行重疊,從而實現(xiàn)快速對比。

        (3)對圖像的閉合輪廓進行匹配。輪廓匹配[9]與邊緣匹配對比方式相同,通過重疊法進行快速比較。

        (4)對圖像的幾何約束進行匹配。對圖像特征之間的幾何約束進行比較,并將結(jié)果作為相似性度量,進一步提高匹配算法的速度?;谔卣鞯钠ヅ浞椒ㄒ话憔哂辛己玫目够叶然兒蛶缀位兡芰Γ⒕哂幸欢ǖ囊种圃肼暩蓴_能力,其關(guān)鍵在于穩(wěn)定、自動和一致的特征提取。

        在圖像特征匹配階段,現(xiàn)有的圖像匹配算法對特征描述子進行匹配,會產(chǎn)生大量的不匹配,這不僅會降低匹配的精度,而且會增加圖像匹配的時間。當(dāng)視覺采集傳感器與慣性導(dǎo)航傳感器組合時,可借助慣性導(dǎo)航數(shù)據(jù)計算特征點可能在同一時間之后的下一次出現(xiàn)在圖像中的區(qū)域;然后在該區(qū)域內(nèi)找到與圖像中前一時刻對應(yīng)的特征點相匹配的特征點,這樣可以提高特征點匹配的精度,減少搜索匹配特征點的面積,減少匹配時間,采用的匹配算法步驟如下:

        第一步:選擇兩幅要匹配的圖像,每個傳感器數(shù)據(jù)都有其對應(yīng)的時間文件,從時間問題文件中找到兩幅圖像對應(yīng)的時間問題;

        第二步:讀取慣性導(dǎo)航數(shù)據(jù)文件,并且在存儲慣性導(dǎo)航數(shù)據(jù)文件的文件夾中有一個圖像數(shù)據(jù)集,該圖像數(shù)據(jù)集用于存儲慣性導(dǎo)航數(shù)據(jù)文件,圖像中有一對一的對應(yīng)時間問題,根據(jù)圖像對應(yīng)的時間問題,需要找到具有相同時間問題的慣性導(dǎo)航數(shù)據(jù)文件;

        第三步:檢測兩幅圖像中的特征點以形成特征描述符選擇圖像特征匹配算法檢測兩幅待匹配圖像的特征點并形成特征描述符,因為不同的算法具有不同的魯棒性,有必要分析車載系統(tǒng)拍攝的圖像的特征;

        第四步:估計所述第二圖像中特征點的坐標(biāo)范圍所述坐標(biāo)值可從所述待匹配的第一圖像的第三步中檢測到的特征點獲得,然后根據(jù)匹配圖像對應(yīng)的慣性導(dǎo)航數(shù)據(jù),利用待匹配的特征點獲得坐標(biāo)值,根據(jù)第三步計算圖像中特征點的變化,并且該特征點在第二幅圖像中找到一個對應(yīng)的點,并圍繞該點劃定搜索范圍。

        在區(qū)域匹配和特征匹配的組合判定下,先是判定工作區(qū)域,然后在工作區(qū)域內(nèi)尋找差異圖像,將這部分差異圖像進行記錄,接著通過特征匹配進行對比,對比物為常見的生活垃圾,當(dāng)對比度足夠時,通過家政機器人將對比物抓取,送入垃圾桶內(nèi)。

        3 家政機器人抓取規(guī)劃

        根據(jù)家政機器人操作的要求,從機器人需要依次完成抓取動作、移動動作和投入垃圾桶動作等動作。然而,時滯問題往往影響運行的可靠性和穩(wěn)定性。一方面,在時間的影響下,系統(tǒng)的輸出在延遲之前由于輸入信號的作用不會響應(yīng)。操作員需要面對t時間之前的狀態(tài)量,這種情況下操作員不能從抓取機構(gòu)的實時反應(yīng)下獲得反饋,從而難以進行操作,導(dǎo)致操作失敗,甚至無法進行操作;另一方面,輸入延長會引起系統(tǒng)的相位滯后,對于維持系統(tǒng)的穩(wěn)定性極為不利。因此,對于機器人的自主操作極具實際價值,能夠有效提高操作的實時性和可靠性,降低人們的成本勞動強度。

        在家政機器人的操作系統(tǒng)內(nèi)設(shè)置有遠程遙操作機器人系統(tǒng),遠程遙操作機器人系統(tǒng)的是指操作者直接在本地控制主機器人的運動的模式,在這種模式下機器人的位置、姿態(tài)等運動信息通過無線信號傳輸給控制單元,控制單元在操作員的控制下對機器人進行命令,使得機器人能夠完成與操作員所期待的動態(tài)操作,當(dāng)遠程監(jiān)控攝像機將遠程截獲物體和環(huán)境的圖像信息傳輸?shù)奖镜毓ぷ髡撅@示器時,主終端應(yīng)根據(jù)截獲物體的位置進行操作。操作員控制主操縱器的運動,主終端控制計算機以檢測主操縱器的位置和位置,并通過網(wǎng)絡(luò)將手指的閉合位置發(fā)送到遠程從屬作業(yè)。從機器人跟蹤主機械手的位置和姿態(tài),逐個接近目標(biāo),形成預(yù)抓取模式,同時,從機器人與遠處環(huán)境相互作用產(chǎn)生的力也通過機器人傳輸給操作員的通信鏈路反饋給主機器人,使本地操作員能夠感知遠程操作信息并產(chǎn)生身臨其境的感覺,在面對難以自動抓取的物體時可以由戶主控制遠程抓取,同時提升了家政機器人的可玩性[10]。

        4 結(jié)語

        區(qū)域匹配對比同一場景的兩幅圖像,然后在粗略的尺度上比較圖像對。如果比較成功,則意味著與圖像對應(yīng)的區(qū)域是可清潔區(qū)域,并且保留比較過程中的差異部分。特征匹配對不同區(qū)域進行二次比較分析。在對區(qū)域匹配生成和記錄的差異區(qū)域進行二次匹配時,利用慣性導(dǎo)航信息可以提高特征匹配的速度,減少誤匹配。在區(qū)域匹配和特征匹配的組合判斷下,首先確定工作區(qū)域,然后在工作區(qū)域中找到差異圖像,記錄這些差異圖像,然后通過特征匹配進行比較。對比對象為普通生活垃圾。如果皮革和紙屑,對比度足夠時,通過家用機器人抓取對比物,將其送到垃圾桶完成垃圾收集。通過組合比較,將全家人的垃圾收集能力添加到家用機器人上,進一步解放房主的雙手,打造更美好的生活。

        猜你喜歡
        慣性導(dǎo)航描述符操作員
        美空軍特種戰(zhàn)術(shù)操作員正在進行軍事自由落體跳傘
        軍事文摘(2022年13期)2022-08-27 01:26:36
        基于結(jié)構(gòu)信息的異源遙感圖像局部特征描述符研究
        基于慣性導(dǎo)航量程擴展的滾動再次受控方法
        基于FPV圖傳及慣性導(dǎo)航系統(tǒng)對機器人的控制
        淺談基于H3C云計算管理平臺的系統(tǒng)管理功能
        Linux單線程并發(fā)服務(wù)器探索
        利用CNN的無人機遙感影像特征描述符學(xué)習(xí)
        面向知識自動化的磨礦系統(tǒng)操作員腦認知特征與控制效果的相關(guān)分析
        ◆新疆青河:遠教操作員“評星定級”激發(fā)遠教工作活力
        極區(qū)間接橫向慣性導(dǎo)航方法
        隔壁的日本人妻bd高清中字| 精品亚洲av一区二区| 久久精品国产亚洲AⅤ无码| 幻女bbwxxxx在线视频| 国产一区二区三区日韩精品| 日本女同视频一区二区三区| 亚洲AV激情一区二区二三区| 日本高清视频wwww色| 免费人成网站在线播放| 国产精品无码精品久久久| 女色av少妇一区二区三区| 日本高清不在线一区二区色| 97精品一区二区视频在线观看| 一区二区三区四区黄色av网站 | 欧美性福利| 337p粉嫩日本欧洲亚洲大胆| 蜜桃av福利精品小视频| 亚洲网站地址一地址二| 国产免费又爽又色又粗视频| 国产麻豆极品高清另类| a观看v视频网站入口免费| 男女猛烈xx00免费视频试看| 亚洲第一女优在线观看| 久久中国国产Av秘 入口| 影音先锋女人av鲁色资源网久久| 国产精品成人av大片| 黄 色 成 年 人 网 站免费| 丁香五香天堂网| 中文字幕av久久亚洲精品| 日本一区二区久久精品亚洲中文无| AV有码在线免费看| 亚洲精品无码av人在线播放| 电驱蚊液可以插一晚上吗| 亚洲综合小综合中文字幕| 98精品国产高清在线xxxx| 国产熟妇按摩3p高潮大叫| av一区二区在线网站| 无码免费午夜福利片在线| 人人狠狠综合久久亚洲| 日韩精品人妻久久久一二三| 成人精品国产亚洲av久久|