亚洲免费av电影一区二区三区,日韩爱爱视频,51精品视频一区二区三区,91视频爱爱,日韩欧美在线播放视频,中文字幕少妇AV,亚洲电影中文字幕,久久久久亚洲av成人网址,久久综合视频网站,国产在线不卡免费播放

        ?

        基于機器視覺的運載火箭支架自動裝配方法研究

        2023-07-13 03:23:50馬慶豐
        機電信息 2023年13期
        關(guān)鍵詞:目標識別

        摘 要:為解決運載火箭內(nèi)部支架人工裝配所面臨的工作環(huán)境嘈雜和勞動強度大等問題,設(shè)計了基于協(xié)作機器人的輔助自動裝配系統(tǒng),并對其裝配路徑進行規(guī)劃。協(xié)作機器人在抓取支架實現(xiàn)自動裝配過程中,受限于支架自身誤差、特征尺寸及位置姿態(tài)的隨機等特點,抓取和定位極為困難。為解決支架自動裝配過程中的難點,首先規(guī)劃了支架自動裝配的工藝流程,設(shè)計了支架抓取機構(gòu)、自動裝配機構(gòu),并配合對應(yīng)的視覺算法完成支架的抓取、自動裝配;其次,結(jié)合YOLOv5深度學習算法對定位目標進行識別,和裝配孔位進行位置補償,實現(xiàn)對裝配孔找正;最后,通過實驗驗證該自動裝配系統(tǒng)中抓取機構(gòu)、自動裝配機構(gòu)的穩(wěn)定性,視覺定位算法的有效性及精度,實驗結(jié)果表明,裝配孔定位精度小于0.06 mm。

        關(guān)鍵詞:火箭支架;自動裝配;YOLOv5;目標識別;位置補償

        中圖分類號:TP29? ? 文獻標志碼:A? ? 文章編號:1671-0797(2023)13-0001-06

        DOI:10.19514/j.cnki.cn32-1628/tm.2023.13.001

        0? ? 引言

        運載火箭鉚接艙體內(nèi)支架型號種類多,幾何尺寸和特征差距大,支架安裝到箭體艙體內(nèi)部時,需要與托板螺母提前鉚接。目前的生產(chǎn)方式是手工錘鉚,工作環(huán)境噪聲達110 dB,勞動強度大。支架類零件實現(xiàn)自動裝配的難點有三個:1)支架種類較多,無法采用機器人示教的方式完成支架的抓取;2)托板螺母與支架連接孔精度在±0.1 mm,以往手眼標定方法不能解決支架裝配問題[1];3)支架屬于鈑金類零件,夾持變形大,與理論模型無法適配。

        國內(nèi)外的定位技術(shù)主要有三類:基于灰度模板匹配的識別定位技術(shù)[2]、基于特征目標匹配的識別定位技術(shù)以及基于深度學習的識別定位技術(shù)[3]。利用上述三種方法,田清廉等人[4]提出了散亂點云的鉚釘孔自動識別方法,該方法僅限提取鉚釘孔位置,并處理局部特征,針對全局特征會造成點云質(zhì)量差而方法失效;浙江大學劉華[5]針對飛機壁板裝配過程中的插鉚釘問題設(shè)計了自適應(yīng)滑??刂破?,結(jié)合視覺系統(tǒng)解決了自動插釘中末端執(zhí)行器法向位姿的調(diào)整精確控制問題,主要面向曲面類需調(diào)整法向的零件;針對運載火箭支架(圖1)裝配問題,目前僅有方舟等人[6]搭建了雙目視覺系統(tǒng),實現(xiàn)視覺引導(dǎo)抓取和位姿調(diào)整及基于邊緣特征對支架位姿的估計,僅限于對支架的抓取,沒有結(jié)合抓取和定位裝配孔識別,不能解決支架自動裝配的全流程問題。

        綜上,目前針對火箭支架自動裝配問題,大多采用模板匹配的抓取方法,并未針對運載火箭支架自動裝配流程中的難點開展工作。本文針對尚需解決的問題,重新規(guī)劃了支架實現(xiàn)自動裝配的工藝流程,搭建了一套自動裝配系統(tǒng)。針對自動裝配過程中的三個難點,設(shè)計了兩套視覺系統(tǒng)分別解決問題:1)結(jié)構(gòu)光相機用于支架識別和抓取,采用支架位姿估計與夾爪位姿調(diào)整的方法,降低支架自身誤差和夾持變形對位姿估計的影響,試驗表明該方法抓取支架的平均誤差小于0.8 mm;2)利用協(xié)作機器人重復(fù)定位精度小的特點,將單目視覺相機用于引導(dǎo)連接孔定位的視覺系統(tǒng),采用YOLOv5深度學習算法對裝配孔進行目標檢測,結(jié)合卡尺工具檢測裝配目標孔邊緣特征。最后,通過實驗驗證了該方法識別裝配孔與調(diào)整位姿的可行性。

        1? ? 支架零件的抓取與定位

        1.1? ? 支架自動裝配工藝流程

        為實現(xiàn)支架的自動裝配,將原有手工操作工藝流程重新規(guī)劃成適合自動裝配的自動化工藝流程:人工放置支架至傳送帶→結(jié)構(gòu)光相機掃描支架獲取點云匹配支架的外形及圖號→協(xié)作機器人根據(jù)識別結(jié)果調(diào)整姿態(tài)抓取支架→視覺識別托板螺母在料盤中的位置→協(xié)作機器人抓取托板螺母并將其放入對應(yīng)的工裝→視覺引導(dǎo)機器人抓取的支架與托板螺母中心對齊→自動擰緊槍送施工螺釘并擰緊,實現(xiàn)托板螺母與支架的連接→協(xié)作機器人將支架送到鉆孔工位→視覺引導(dǎo)協(xié)作機器人實現(xiàn)托板螺母的鉚釘孔與主軸對齊→制孔→協(xié)作機器人運送支架至插釘工位→視覺引導(dǎo)鉚釘孔與插釘機構(gòu)對齊→插入鉚釘→協(xié)作機器人運送支架至鉚接工位鉚接→返回人工操作臺檢查并拆除施工螺釘。

        為實現(xiàn)上述裝配過程,在自動裝配系統(tǒng)中需要精確定位的關(guān)鍵工步上設(shè)置了不同的視覺相機(圖2):支架抓取識別視覺相機、裝配孔對準視覺相機和鉚釘孔對準視覺相機。

        1.2? ? 支架抓取視覺識別

        支架放置在物料傳輸模塊上,將零件自動傳輸?shù)竭m合機器人抓取的區(qū)域(圖3),在抓取區(qū)域上方設(shè)計結(jié)構(gòu)光相機用于檢測支架和引導(dǎo)機器人抓取。

        工件最大尺寸是400 mm×400 mm,視場范圍要大于400 mm,在抓取識別上選用Mech-Eye-PRO-M結(jié)構(gòu)光相機,其參數(shù)如表1所示。

        支架抓取涵蓋支架的邊緣識別、模板匹配與定位、協(xié)作機器人末端抓取機構(gòu)的初始位置估計和抓取位置估計,支架抓取的工藝流程圖如圖4所示。

        支架位置估算中,利用結(jié)構(gòu)光相機得到的點云進行平面擬合,分割出支架點云,再提取支架邊緣,在夾爪末端設(shè)置4個視覺標記點(圖5),用結(jié)構(gòu)光相機獲得4個標記點在相機坐標系下的位置,根據(jù)標記點的相對位置關(guān)系計算出夾爪在相機坐標系下的位姿,最終可以求出夾爪末端位姿在基座坐標系中的位置,控制協(xié)作機器人移動至目標點位。

        支架零件采用視覺引導(dǎo)抓取的方式,在夾爪上設(shè)置標記點,夾爪位姿反饋機器人調(diào)姿,該方法不用對協(xié)作機器人和視覺系統(tǒng)標定,對精確抓取工件有 一定柔性。

        1.3? ? 裝配孔對準和鉚釘孔對準

        在托板螺母擰緊工位、制孔工位、插鉚釘工位需要檢測支架上預(yù)制孔的位置[7],且孔銷配合精度為0.1 mm,需要檢測精度約在0.03 mm,因此需要小視場高精度的相機,由于功能近似,均選用??低昅V-CE060-11GC單目相機+海康威視MVL-MT-2-

        110C-MY23相機。小視場的相機檢測精度高,但是會放大識別圖像里的噪點,為滿足使用要求,采用YOLOv5深度學習[8]的目標算法對預(yù)制孔第一次定位,根據(jù)結(jié)果再采用卡尺工具擬合精確定位的方法。MV-CE060-

        11GC單目相機參數(shù)如表2所示。

        采用SiLU作為激活函數(shù):

        式中:B為訓(xùn)練的標準邊界;Bgt為檢測輪廓邊界;C為B和Bgt邊界交集的最小輪廓邊界;β為衡量縱橫比重疊面積損失的平衡因子;v為長寬邊界比一致性參數(shù);d為計算中心點的距離。

        對于托板螺母的裝配孔,采用各種拍攝位置、不同光照、不同規(guī)格的托板螺母等手工拍攝圖像,采用labelme工具進行標注,得到數(shù)據(jù)集共計350張。

        使用上述數(shù)據(jù)集訓(xùn)練YOLOv5模型,初始學習率為0.01,訓(xùn)練批次(batch)設(shè)置為4,圖像尺寸設(shè)置為600×600,其他使用預(yù)設(shè)值。訓(xùn)練結(jié)果如圖6所示。

        使用訓(xùn)練完成的YOLOv5模型對運行中采集的圖片進行檢測(圖7),支架安裝孔的目標檢測區(qū)域能滿足使用需求。

        檢測目標孔位置后,對目標進行定位,需要檢測出圓的邊緣,然后對圓擬合,使用卡尺工具進行邊緣提取,卡尺邊緣提取涉及圖像投影處理、高通濾波計算、邊緣閾值處理和邊緣像素處理。

        圖像投影處理為沿著目標檢測的邊緣垂直掃描圖像,獲得離散投影線的強度值,用于均化目標檢測區(qū)域的噪點,提高檢測成功率,經(jīng)過投影處理后可得到離散點的數(shù)組。

        使用高通濾波器對圖像投影的數(shù)據(jù)進行濾波處理,使目標檢測邊緣突出,增強圖像對比度,使用Prewitt算子對圖像兩個方向模板與圖像進行鄰域卷積,用于抑制噪聲和均化。

        在濾波輸出中設(shè)置閾值,可以排除噪聲點,超過設(shè)置閾值認為是真實邊界。對于提取出真實邊界幾個鄰近的像素點進行插值計算擬合,可獲得目標檢測的精確位置。

        利用YOLOv5模型生成目標孔位置圓心位置,使用一組卡尺工具檢測出邊緣點,圓心位置坐標直接用最小二乘法對目標孔邊緣圓擬合(圖8)。

        使用卷積神經(jīng)網(wǎng)絡(luò)YOLOv5模型生成目標孔區(qū)域,后使用卡尺工具擬合目標孔邊緣,最后根據(jù)孔邊緣擬合出圓心。

        2? ? 實驗驗證

        通過對運載火箭上實物支架進行全流程工藝驗證測試,包含支架運輸、支架抓取、托板螺母抓取、支架與托板螺母擰緊、支架托板螺母鉆孔、鉚釘插釘,來驗證支架自動裝配的全流程應(yīng)用工況。

        基于實際運行流程,驗證分為支架識別和抓取、支架與托板螺母擰緊、制孔劃窩和插釘鉚接三個部分。

        2.1? ? 支架識別和抓取

        支架型號的識別是后續(xù)所有工序的基礎(chǔ),對應(yīng)型號在工藝數(shù)據(jù)庫里面有對應(yīng)的自動加工程序。識別支架型號,先使用支架種類數(shù)據(jù)集對YOLOv5模型進行訓(xùn)練,然后使用訓(xùn)練過的模型檢測支架目標,設(shè)置0.8為識別閾值,測試其中10種支架檢測結(jié)果,如表3、圖9所示。

        支架型號識別完成后對支架進行抓?。▓D10),支架的穩(wěn)定抓取是后續(xù)支架自動裝配的基礎(chǔ)。在抓取過程中采用結(jié)構(gòu)光相機拍攝四次:第一次拍攝預(yù)估工件位置,記作初始偏差;第二次拍攝預(yù)估工件與協(xié)作機器人末端位置,記作粗調(diào)偏差,并引導(dǎo)機器人到靠近工件位置;第三次拍攝為精定位,記作精調(diào)偏差,引導(dǎo)機器人抓取工件;第四次拍攝為抓取后拍攝,測試裝配孔與夾具標記點偏差,用于后續(xù)自動裝配定位。

        統(tǒng)計支架3的20次抓取數(shù)據(jù),人工隨機將支架3放置在輸送帶上。從表4可見,支架抓取的粗調(diào)定位偏差較大,平均定位誤差為2.24 mm。機器人絕對定位精度和標定誤差導(dǎo)致初次支架抓取定位有較大誤差,粗調(diào)定位可以認為是一次開環(huán)定位,定位精度難以控制。利用支架視覺引導(dǎo)抓取再次測量并調(diào)整定位夾爪,精調(diào)平均偏差為0.67 mm,遠低于粗調(diào)定位偏差,滿足支架抓取的精度要求。經(jīng)過一次視覺伺服補償后,抓取定位偏差降低了1.57 mm,驗證了支架視覺伺服抓取策略可以有效提高支架抓取精度。

        2.2? ? 支架與托板螺母擰緊

        首先設(shè)定支架裝配孔目標點的像素坐標為(1 536,1 024),此為M4托板螺母裝配孔中心位置,控制協(xié)作機器人使支架裝配孔在視場范圍內(nèi),使用卷積神經(jīng)網(wǎng)絡(luò)YOLOv5模型對托板螺母上的裝配螺紋孔進行目標檢測(圖11),并使用孔定位誤差測量與補償算法實時引導(dǎo)機器人調(diào)整支架姿態(tài),實現(xiàn)支架裝配孔與托板螺母螺紋孔對中。

        從表5數(shù)據(jù)可以看出,通過視覺引導(dǎo)可將裝配孔從具有9 mm誤差的位置引導(dǎo)至目標點,定位誤差為0.061 mm,遠低于擰緊裝配要求的0.2 mm精度,滿足擰緊裝配使用要求。

        2.3? ? 制孔劃窩和插釘鉚接

        在支架與托板螺母擰緊后,需對支架托板螺母的鉚接孔位置完成支架表面的鉆孔和锪孔,并在鉚接孔插入鉚釘,此過程均需視覺引導(dǎo)(圖12)。

        實驗完成的支架零件如圖13所示。圖13(a)展示了支架零件施工螺釘擰緊與鉆锪孔效果;圖13(b)(c)展示了鉚接孔加工質(zhì)量滿足要求,驗證了支架托板螺母鉚釘孔定位誤差測量與補償技術(shù)的可實施性,且滿足鉆孔±0.1 mm的精度要求。

        3? ? 結(jié)論

        本文通過研究運載火箭支架零件自動裝配技術(shù),研制出一套利用協(xié)作機器人對運載火箭支架進行自動抓取和裝配的可實施工藝和設(shè)備,在自動識別抓取的環(huán)節(jié)采用卷積神經(jīng)網(wǎng)絡(luò)、支架位姿估計和夾具位姿估計的方法,最終抓取精度小于0.7 mm;在自動擰緊、制孔劃窩、自動插釘環(huán)節(jié),通過視覺引導(dǎo)裝配孔定位誤差檢測和補償,精度可達0.061 mm,突破了支架自動裝配中的難點;采用實物加工驗證了支架自動裝配的可行性和可靠性,解決了支架零件手工操作產(chǎn)品質(zhì)量不可靠、生產(chǎn)效率低、勞動環(huán)境差及強度大等問題,為運載火箭中支架類多品種、小批量零件的自動化裝配應(yīng)用奠定了一定的基礎(chǔ)。

        [參考文獻]

        [1] 鄭健紅.面向機器人精確拾取的散亂金屬零件識別與定位方法研究[D].杭州:浙江工業(yè)大學,2020.

        [2] 方舟,程筱勝,崔海華,等.基于GAPSO-SVM的鈑金零件圖像識別方法[J].機械制造與自動化,2020,49(5):116-118.

        [3] 范荻,金守峰,陳蓉,等.面向裝配機器人的零件視覺識別與定位方法[J].西安工程大學學報,2018,32(1):114-120.

        [4] 田清廉,熊天辰,黃翔,等.一種基于散亂點云的鉚釘孔孔位提取方法[J].航空制造技術(shù),2022,65(7):83-89.

        [5] 劉華.視覺定位關(guān)鍵技術(shù)及其在飛機裝配中的應(yīng)用研究[D].杭州:浙江大學,2019.

        [6] 方舟.面向機器人裝配的機器視覺工件識別與定位技術(shù)研究[D].南京:南京航空航天大學,2020.

        [7] LU C S,XIA S Y,SHAO M,et al.Arc-support line segments revisited:an efficient high-quality ellipse detection[J].IEEE Transactions on Image Processing,2019,29:768-781.

        [8] WANG C,ZHANG Y C,ZHOU Y F,et al.Automatic detection of indoor occupancy based on improved YOLOv5 model[J].Neural Computing and Applications,2022,35(3):2575-2599.

        收稿日期:2023-03-01

        作者簡介:馬慶豐(1983—),男,河南安陽人,工程師,研究方向:航天自動鉆鉚及非標自動化產(chǎn)品開發(fā)。

        猜你喜歡
        目標識別
        渡口水域安全監(jiān)管技術(shù)研究
        中國水運(2016年11期)2017-01-04 12:26:13
        全自動模擬目標搜救系統(tǒng)的設(shè)計與實現(xiàn)
        動態(tài)場景中的視覺目標識別方法分析
        基于PC的視覺解決方案在 Delta機器人抓放中的應(yīng)用
        價值工程(2016年32期)2016-12-20 20:36:15
        移動機器人圖像目標識別
        基于深度學習的目標反饋識別系統(tǒng)
        制服丝袜一区二区三区 | 欧洲成人午夜精品无码区久久| 8ⅹ8x擦拨擦拨成人免费视频 | 免费国产黄片视频在线观看| 天天做天天爱天天综合网| 欧美第五页| 91成人午夜性a一级毛片| 亚洲精品国产福利在线观看| 日本一区二区三区一级免费| 日韩午夜三级在线视频| 干出白浆视频在线观看| 国产亚洲人成在线观看| 国产欧美日韩中文久久| 被三个男人绑着躁我好爽视频| 中文字幕在线播放| 国产人妻黑人一区二区三区| 欧美人与禽交zozo| 婷婷激情五月综合在线观看| 一区二区三区手机看片日本韩国| 我揉搓少妇好久没做高潮| 一区二区三区国产免费视频 | 伊人色综合久久天天人手人停| 国产美女裸身网站免费观看视频| 亚洲福利av一区二区| 亚洲av成人永久网站一区| 久久中文字幕人妻淑女| 国产欧美成人一区二区a片 | av在线观看免费天堂| 老师粉嫩小泬喷水视频90| 精品少妇ay一区二区三区| 亚洲制服无码一区二区三区| 日本成年少妇人妻中文字幕| 久久天天躁狠狠躁夜夜av浪潮| 欧洲成人午夜精品无码区久久| 中文字幕天天躁日日躁狠狠| 精品福利一区二区三区| 国产精品亚洲专区无码不卡| 中国老熟女重囗味hdxx| 国产成人影院一区二区| bbbbbxxxxx欧美性| 青青草手机在线免费观看视频|