亚洲免费av电影一区二区三区,日韩爱爱视频,51精品视频一区二区三区,91视频爱爱,日韩欧美在线播放视频,中文字幕少妇AV,亚洲电影中文字幕,久久久久亚洲av成人网址,久久综合视频网站,国产在线不卡免费播放

        ?

        視覺融合SLAM魯棒框架研究

        2022-01-19 06:30:50王一波梁偉鄯
        江蘇通信 2021年6期
        關鍵詞:魯棒性光照框架

        王一波 梁偉鄯

        柳州工學院

        0 引言

        同時定位與地圖構建(Simultaneous Localization And Mapping,簡稱SLAM),通常是指在機器人或者其他載體上,通過對各種傳感器數(shù)據(jù)進行采集和計算,生成對其自身位置姿態(tài)的定位和場景地圖信息的系統(tǒng),其對于智能機器人走向應用發(fā)揮著關鍵作用。當前,主流SLAM技術分為激光和視覺兩大類。激光SLAM算法簡單,但成本相對較高,應用具有一定局限性;視覺SLAM利用攝像機(單目、雙目或者RGBD)可以從環(huán)境中獲取海量的、冗余的紋理信息,擁有超強的場景辨識能力,將成為今后技術發(fā)展的主要趨勢,但其算法復雜,魯棒性較差。以視覺為主要信息收集手段,融合IMU、編碼器等多種傳感器,構成視覺融合SLAM框架,可以從根本上克服單視覺SLAM對光照敏感的問題,更具魯棒特性。而作為成熟的機器人操作系統(tǒng)ROS,由于支持眾多硬件的軟件端口的同時掛載,在操作系統(tǒng)層和應用層之間架起了一座可靠的技術橋梁,而日漸得到廣大研究人員的青睞,以其為基礎構建SLAM的通用平臺,可低耦合度的分布式進程,控制網(wǎng)絡邏輯清晰,掛載方便,十分便于驗證SLAM框架性能。本文將構建一個以維持系統(tǒng)運行穩(wěn)定為主的框架,以提高SLAM技術的魯棒性,增強其在不同環(huán)境和狀況下的適應能力。

        1 視覺融合SLAM功能架構設計

        1.1 基本功能框架

        視覺SLAM利用攝像機(單目、雙目或者 RGBD)具有重定位、場景分類上無可比擬的巨大優(yōu)勢,但目前受限于硬件技術性能及軟件算法,尚未取得關鍵性突破。而慣性傳感器(IMU)具有不受場景和運動速度限制、實時準確測量無人系統(tǒng)位姿變化的優(yōu)點,缺點是長時間運行會產(chǎn)生累加誤差。本文將以視覺傳感器為主、IMU為輔構建視覺慣性融合SLAM,充分利用圖像信息的長時間穩(wěn)定性和IMU數(shù)據(jù)的短時間準確性,從而得到更加魯棒的狀態(tài)估計結果。視覺傳感器與IMU的耦合方式可分為剛性連接和非剛性連接,前者即IMU相對視覺傳感器的空間位置固定,后者是兩類傳感器位置無約束關系。考慮IMU僅僅作為視覺傳感器的輔助機構,避免增加問題的復雜性,本文選擇剛性連接,即未出現(xiàn)異常情況下,兩傳感器經(jīng)參數(shù)標定后的位姿轉(zhuǎn)換關系不會發(fā)生改變。

        本文的設計目的除SLAM系統(tǒng)常規(guī)任務定位和建圖外,還包括魯棒性設計,主要通過增加相應環(huán)節(jié)提升SLAM系統(tǒng)的環(huán)境性,降低誤報概率,從而避免無人系統(tǒng)關鍵應用的損失。為了更好地描述需求細節(jié),通過分節(jié)點解構視覺SLAM的任務,同時理清數(shù)據(jù)流向,整體設計如圖1所示。

        圖1 視覺SLAM功能結構圖

        圖1 中視覺傳感器采集外部環(huán)境數(shù)據(jù),IMU采集無人系統(tǒng)本體數(shù)據(jù)(包括加速度、角速度和地磁方向),這與高等動物融合視覺和立體感覺來推測自身姿態(tài)的方法十分相似。校準初始化節(jié)點主要用于兩類傳感器的同步,確保各自狀態(tài)估計不會錯位;失效檢測主要用于視覺傳感器的即時失效檢測,起到數(shù)據(jù)過濾功能,確保質(zhì)量低下圖像被濾除;濾波節(jié)點主要用于估計系統(tǒng)狀態(tài);魯棒融合節(jié)點則對應CI融合魯棒穩(wěn)態(tài)卡爾曼濾波器,用于融合視覺SLAM估計和里程計估計的結果,形成對于較大范圍環(huán)境的穩(wěn)定輸出。在此,重點說明環(huán)境控制節(jié)點和動態(tài)檢測節(jié)點。

        1.2 環(huán)境控制節(jié)點

        環(huán)境控制節(jié)點主要負責環(huán)境參數(shù)的收集,包括無人系統(tǒng)大致位置、時區(qū)、時間、天氣及室內(nèi)或者室外等。無人系統(tǒng)通過連接互聯(lián)網(wǎng)實時獲取,主要用于為SLAM系統(tǒng)環(huán)境建模和姿態(tài)估計提供信息用以輔助決策,以提高視覺SLAM系統(tǒng)的魯棒性?;驹砣缦拢侯惐热酥饕@取信息的主要渠道是視覺,但視覺會遵循環(huán)境光照強度變化做出相應的調(diào)節(jié),而對于視覺SLAM系統(tǒng)也是相同的,視覺傳感器對于天候及環(huán)境也將有著不同的表現(xiàn),比如在雨天、霧天和雪天,會嚴重影響成像,甚至會造成視覺傳感器失效,如果不做調(diào)整,會為無人系統(tǒng)的應用帶來損失。綜合各種環(huán)境參數(shù),可以換算為環(huán)境的光照亮度范圍,以此作為決策的依據(jù)。具體決策如表1和表2所示。決策依據(jù)光照亮度分為A、B、C三類,分別進行數(shù)據(jù)傳輸與任務決策,用以決定是否進行數(shù)據(jù)轉(zhuǎn)發(fā)以及任務的運行和中止,以此提高系統(tǒng)對環(huán)境的適應性。

        表1 環(huán)境影響決策

        表2 決策說明

        1.3 動態(tài)檢測節(jié)點

        根據(jù)已有經(jīng)驗,視覺SLAM在靜態(tài)環(huán)境下表現(xiàn)更為魯棒,而當場景中出現(xiàn)運動物體,則會造成不同程度的影響,而且運動物體越多,影響將越大。為此,可將場景分為靜態(tài)和動態(tài)兩部分,前者是相對穩(wěn)定不變的背景部分,后者是前景移動的目標部分,在視覺SLAM應用中被認為是干擾因素。為降低動態(tài)部分的影響,本文設計了專門的檢測節(jié)點,用以剔除場景中的動態(tài)部分。通過訓練可實時運行的You only look once(YOLO)網(wǎng)絡,檢測包括植物、動物、交通工具、路標等各種室外環(huán)境中的目標,將其從圖像中分離出來。

        Scene={(c_i,n_i,P_i )│i=1,2,…,K} (1)

        式中,c_i表示第i類別目標,n_i表示第i類別目標數(shù)量,P_i表示目標的位置(包括x、y坐標及目標高度、寬度)。

        2 視覺融合SLAM技術架構設計

        2.1 基于ROS的硬件框架設計

        從學科上看,SLAM屬于機器人學的范疇,具有一定的復雜度,要使其穩(wěn)定可靠運行,必須提升技術架構的性能。類比智能手機目前常用的操作系統(tǒng)Android和iOS的底層分別是開源的GNU/Linux和Darwin,目前移動機器人的開發(fā)多是建立在ROS(Robot operating system)上,其能為復雜任務計算節(jié)約空間和算力,確保各程序在適當時間被執(zhí)行,同時可以為多進程通信提供良好的底層支持。ROS是由Open SourceRobotics Foundation(OSRF)提供的開源的機器人學中間件,用于編寫機器人軟件部分的靈活框架,其集成了各種工具、庫和規(guī)范,旨在簡化在各種機器人平臺上控制機器人實現(xiàn)復雜、強大行為的工作。

        本文驗證平臺的總體方案是“微型計算機上位機+單片機下位機”。上位機承載ROS,負責任務視覺SLAM與控制,下位機作為掛載于ROS中的節(jié)點存在,控制具體的控制對象(如電機、傳感器等),通用平臺技術框架如圖2所示。

        圖2 通用平臺技術框架

        2.2 節(jié)點通信設計

        相較于ROS1,ROS2對通信機制進行了改進,提出了基于Data Distribution Service(DDS)通信,實現(xiàn)了無主節(jié)點的去中心化通信及指定分布式訂閱和發(fā)布規(guī)范,廣泛應用于醫(yī)療、航空和船舶等對穩(wěn)定性要求高的領域。本文構建了圖3所示的基于DDS(Data Distribution Service)的ROS 2系統(tǒng)的通信技術架構,通過將所有節(jié)點數(shù)據(jù)發(fā)布到所在全局數(shù)據(jù)域(Global Data Space),實現(xiàn)了所有節(jié)點也將從全局數(shù)據(jù)域訂閱其它節(jié)點數(shù)據(jù)。同時DDS層也為二次開發(fā)提供了多編程語言的統(tǒng)一接口,可以滿足使用C++、Java和Python在不同操作系統(tǒng)實現(xiàn)無阻礙的去中心化數(shù)據(jù)交流。圖3中,操作系統(tǒng)層用橙色標識,中間件層包含DDS和ROS 2,分別采用綠色和藍色標識,應用層即維穩(wěn)框架(SafeguardFramework),用黃色標識。

        圖3 DDS通信技術結構圖

        3 實驗及分析

        選取封閉環(huán)境作為機器人掃描實驗的環(huán)境,為增加機器人掃描的完整性,實驗環(huán)境為某校教室,長12米寬9米,現(xiàn)對封閉環(huán)境進行簡單的搭建與設置,實驗的主要研究對象是6把椅子和1張講臺,同時在實驗環(huán)境中還有一些其他的障礙物。實驗環(huán)境如圖4所示。

        圖4 實驗環(huán)境

        因?qū)嶋H場景中,難以獲得機器人的真實軌跡,但場景中物體尺寸可事先測量得到,為此設計如下實驗:不同光照條件下點云掃描精度實驗、不同運動速度條件下點云掃描精度實驗,比較本文提出的視覺SLAM融合框架與單視覺SLAM。為排除干擾因素,實驗路線如圖5所示,統(tǒng)一為直線行進。

        圖5 實驗路線

        本次實驗分別選擇上午光照均勻、中午光照較亮及傍晚光照較暗三種自然光照條件下進行,為避免速度的影響,實驗過程在速度較慢的條件下完成。

        由圖6、圖7可以看出,視覺融合SLAM算法相比單視覺SLAM更穩(wěn)定,二者在光照均勻條件下,掃描點云都比較完整,而在光照較暗或者較亮的條件下,點云都有明顯缺失,但單視覺SLAM更為明顯,這是由于光照變化劇烈時,部分幀特征點缺失,造成建圖丟失。根據(jù)點云數(shù)據(jù)進一步對場景中的物體尺寸進行測量,結果如表3和表4所示。

        圖6 單視覺SLAM不同光照條件下掃描結果圖

        圖7 視覺融合SLAM不同光照條件下掃描結果圖

        表3 單視覺SLAM不同光照測量結果

        表4 融合視覺SLAM不同光照測量結果

        ?

        由上表可以看出,單視覺SLAM在光照均勻條件下,最大誤差0.14m,光照較暗、光照較亮條件下最大誤差分別為0.26m和0.17m;融合視覺SLAM在光照均勻條件下,最大誤差0.15m,光照較暗、光照較亮條件下最大誤差分別為0.16m和0.15m??梢姽庹談×易兓瘯r,單視覺SLAM受到較大影響,魯棒性較差,融合視覺SLAM在均勻光照條件下,測量精度沒有明顯提高,但對光照變化的魯棒性發(fā)生了顯著增加,所以視覺融合SLAM框架比單視覺SLAM表現(xiàn)更穩(wěn)定。

        4 結束語

        本文提出了一種基于融合視覺的SLAM框架,為提高SLAM魯棒性,從功能設計階段充分考慮了環(huán)境及動態(tài)過程可能給定位和建圖帶來的影響,專門設計了環(huán)境監(jiān)測節(jié)點和動態(tài)檢測節(jié)點。在技術實現(xiàn)階段,充分利用了ROS2通信的優(yōu)越性,采用DDS方式將上位機掛載的節(jié)點有效融合在了一起。實驗表明,融合多種傳感器的視覺SLAM框架比單視覺SLAM框架,無論在定位精度還是魯棒性上,都有了一定的提升高,同時也發(fā)現(xiàn)深度融合多傳感器數(shù)據(jù)是解決機器人定位的重要方向,今后將圍繞如何在機理層面實現(xiàn)融合開展進一步的研究。

        猜你喜歡
        魯棒性光照框架
        節(jié)能環(huán)保 光照萬家(公益宣傳)
        框架
        節(jié)能環(huán)保光照萬家(公益宣傳)
        廣義框架的不相交性
        荒漠綠洲區(qū)潛在生態(tài)網(wǎng)絡增邊優(yōu)化魯棒性分析
        基于確定性指標的弦支結構魯棒性評價
        中華建設(2019年7期)2019-08-27 00:50:18
        春光照瑤鄉(xiāng)
        WTO框架下
        法大研究生(2017年1期)2017-04-10 08:55:06
        基于非支配解集的多模式裝備項目群調(diào)度魯棒性優(yōu)化
        非接觸移動供電系統(tǒng)不同補償拓撲下的魯棒性分析
        91精品全国免费观看青青| 午夜射精日本三级| 亚洲五月天综合| 亚洲VA欧美VA国产VA综合| 亚洲综合在线一区二区三区| av大全亚洲一区二区三区| 日日摸天天摸人人看| 亚洲毛片αv无线播放一区| 午夜av福利亚洲写真集| av日韩一区二区三区四区| 国产麻传媒精品国产av| 91视频免费国产成人| 极品少妇被后入内射视| 亚洲精一区二区三av| 久久久无码人妻精品一区| 日韩欧美国产丝袜视频| 日本高清色一区二区三区| 老鲁夜夜老鲁| 人禽伦免费交视频播放| 亚洲一区二区久久青草| 毛片精品一区二区二区三区| 强开少妇嫩苞又嫩又紧九色| 欧美午夜精品久久久久久浪潮| 久久国产精品男人的天堂av | 国产亚洲日本精品二区| 亚洲精品无码专区在线在线播放| 久久精品国产亚洲av忘忧草18| 无码伊人久久大蕉中文无码| 中文字幕精品一区二区的区别| 午夜福利av无码一区二区| 国产精品视频久久久久| 亚洲精品中文字幕乱码三区99| 亚洲国产精品综合久久网络| 丰满少妇愉情中文字幕18禁片 | 国产精品搭讪系列在线观看| 福利视频自拍偷拍视频| 亚洲中文字幕日产无码| 日日噜噜噜夜夜爽爽狠狠| 极品粉嫩小仙女高潮喷水视频 | 欧美激情一区二区三区| 国产精品密播放国产免费看|