林木 丁雨 單麗君
摘要:簡要介紹了增強現(xiàn)實技術(shù)及AR+3D打印技術(shù)的應(yīng)用情況,闡述了基于增強現(xiàn)實技術(shù)的3D打印輔助系統(tǒng)的構(gòu)建和實現(xiàn)過程。該系統(tǒng)利用Unity3D引擎,以3D打印模型為研究對象,將3D打印技術(shù)和增強現(xiàn)實技術(shù)相結(jié)合,實現(xiàn)了虛擬和真實環(huán)境的融合顯示。系統(tǒng)發(fā)布于PC端并應(yīng)用于3D打印工作和機械結(jié)構(gòu)教學(xué)中,對于促進機械行業(yè)的智能化發(fā)展具有重要意義。
關(guān)鍵詞:增強現(xiàn)實;3D打印;Unity3D引擎;仿真教學(xué)
0 引言
近年來隨著科學(xué)技術(shù)的不斷發(fā)展,3D打印技術(shù)的應(yīng)用領(lǐng)域日益擴大。同時,3D打印技術(shù)不斷改進,操作簡便,使許多制造商開始將人工智能技術(shù)與3D打印機結(jié)合使用,可以大大縮短整個工程項目的設(shè)計周期。
增強現(xiàn)實(AR)是虛擬現(xiàn)實研究的重要分支,它是隨著虛擬現(xiàn)實技術(shù)的發(fā)展和成熟而產(chǎn)生的,因此兩者之間有著密不可分的關(guān)系?;旌犀F(xiàn)實是指將現(xiàn)實環(huán)境和虛擬環(huán)境按一定比例混合。通常虛擬現(xiàn)實系統(tǒng)通過構(gòu)建封閉的沉浸式環(huán)境,將用戶帶入計算機生成的虛擬世界,而增強現(xiàn)實系統(tǒng)則相反,它試圖將計算機生成的虛擬信息插入用戶的實際工作環(huán)境中。
1 增強現(xiàn)實技術(shù)及AR+3D打印技術(shù)的應(yīng)用
1.1? ? 增強現(xiàn)實技術(shù)
增強現(xiàn)實是近年來學(xué)術(shù)界的研究熱點,是虛擬現(xiàn)實的重要分支。增強現(xiàn)實技術(shù)通過將計算機生成的虛擬圖像實時疊加到真實環(huán)境中,獲得了與傳統(tǒng)沉浸式虛擬現(xiàn)實技術(shù)完全不同的視覺效果。
與虛擬現(xiàn)實技術(shù)相比,增強現(xiàn)實技術(shù)利用了多傳感器技術(shù)、人機交互技術(shù)、計算機圖形技術(shù)和立體顯示技術(shù),從而可以將用戶周圍的真實環(huán)境與計算機生成的虛擬環(huán)境整合在一起。增強現(xiàn)實技術(shù)通過可視化技術(shù)生成真實環(huán)境中不存在的虛擬對象,然后通過傳感技術(shù)將虛擬對象添加到增強現(xiàn)實系統(tǒng)中,然后將虛擬對象和真實環(huán)境集成到立體顯示設(shè)備中,最后將一種貼近真實感官效果的新環(huán)境呈現(xiàn)在用戶眼前。
1.2? ? AR+3D打印技術(shù)
美國康奈爾大學(xué)已經(jīng)開發(fā)了3D打印+AR技術(shù),通過AR視覺來控制3D打印的模型生成,從而節(jié)省了企業(yè)的生產(chǎn)成本。
利用3D打印+AR技術(shù),我國成功完成了首例高科技骨科手術(shù)。該手術(shù)使用AR技術(shù)檢查患者身體的病變部位,然后將患者的檢查圖像數(shù)據(jù)導(dǎo)入計算機中生成詳細(xì)的病變部位3D模型,最后由3D打印技術(shù)打印出人體組織。在手術(shù)中使用3D打印+AR技術(shù),有助于醫(yī)生進行準(zhǔn)確的手術(shù)規(guī)劃,從而大大提高手術(shù)的成功率和安全性,并且3D打印機打印出來的人體組織模型更適合患者。
3D打印+AR技術(shù)是未來3D打印技術(shù)的重要發(fā)展方向。AR和3D打印技術(shù)的強強結(jié)合,可以縮短打印時間,提高打印效率,從而節(jié)省企業(yè)生產(chǎn)成本。
2 基于增強現(xiàn)實技術(shù)的3D打印輔助系統(tǒng)構(gòu)建
利用增強現(xiàn)實技術(shù),將3D打印的虛擬幾何模型投影到真實環(huán)境中的正確位置,并與真實打印區(qū)域?qū)R,以實現(xiàn)虛擬和真實對象的融合顯示。虛擬現(xiàn)實融合系統(tǒng)按從上到下、從左到右的順序遍歷層次樹模型中的每個節(jié)點,渲染并生成虛擬和真實的融合場景。
基于增強現(xiàn)實技術(shù)的3D打印輔助系統(tǒng)工作原理:由攝像機收集3D打印工作場景的視頻流信號,并通過對3D打印工作場景進行解碼來獲得真實3D打印場景的輸入圖像、視頻流,從計算機輔助設(shè)計系統(tǒng)獲得增強現(xiàn)實系統(tǒng)所需的虛擬對象模型和相關(guān)信息,并通過該軟件讀取3D打印模型的信息。
3 基于增強現(xiàn)實技術(shù)的3D打印輔助系統(tǒng)的實現(xiàn)
本系統(tǒng)的實現(xiàn)過程中用到了Unity3D引擎及其AR Foundation插件。ARFoundation是Unity3D引擎構(gòu)建的一個AR開發(fā)平臺。2017年,Apple公司與Google公司相繼推出了各自的AR開發(fā)SDK工具包ARKit和ARCore,分別對應(yīng)iOS平臺與Android平臺的AR開發(fā)。ARKit和ARCore推出后,極大地促進了AR在移動端的普及發(fā)展,將AR從實驗室?guī)氲狡胀ㄏM場景中。由于當(dāng)前的移動手機操作系統(tǒng)主要由iOS與Android兩大系統(tǒng)統(tǒng)治,ARKit和ARCore分別服務(wù)于各自的系統(tǒng)平臺,這意味著軟件生廠商要開發(fā)一套移動AR應(yīng)用就必須使用ARKit開發(fā)一個iOS版本,使用ARCore開發(fā)一個Android版本,這無疑增加了開發(fā)時間與成本。
ARCore提供了Android、Android NDK、Unity、Unreal開發(fā)包,ARKit官方只提供了Xcode開發(fā)包,這也提高了利用其他工具進行開發(fā)的開發(fā)者的學(xué)習(xí)成本。在這種情況下,Unity3D構(gòu)建了一個AR開發(fā)平臺,這就是ARFoundation,這個平臺架構(gòu)于ARKit和ARCore之上,其目的就是利用Unity3D的跨平臺能力,構(gòu)建一種與平臺無關(guān)的AR開發(fā)環(huán)境,換句話說,ARFoundation對ARKit與ARCore進行了再次封裝,并按照用戶的發(fā)布平臺自動選擇合適的底層SDK版本。
開發(fā)人員借助AR Foundation,可以在Unity3D中以多平臺的方式開發(fā)增強現(xiàn)實技術(shù)。該軟件包提供了一個供Unity3D開發(fā)人員使用的界面,但本身并未實現(xiàn)任何AR功能。要在目標(biāo)設(shè)備上使用AR Foundation,還需要添加針對該平臺的軟件包,例如iOS平臺的ARKit XR Plugin或Android平臺的ARCore XR Plugin。
系統(tǒng)中各個組件的功能:
3.1? ? AR Session
每個AR場景應(yīng)包含一個AR Session組件來管理全局,AR Session可以附加在任何的GameObject上,并通過在目標(biāo)平臺上啟用或禁用AR來控制其生命周期。
如果啟用“Attempt Update”選項,則設(shè)備將嘗試更新AR軟件,但此功能的支持與否取決于平臺類型。
3.2? ? AR Session Origin
AR Session Origin的目的是將可跟蹤特征轉(zhuǎn)換為Unity3D場景中的位置、方向和比例。AR設(shè)備通過在“session space”中提供其數(shù)據(jù),并由AR Session Origin轉(zhuǎn)換到Unity3D空間。AR Session Origin還可以縮放虛擬內(nèi)容并將偏移量應(yīng)用于AR相機。
4 結(jié)語
借助基于增強現(xiàn)實技術(shù)的3D打印輔助系統(tǒng),我們可以最終將3D打印場景與虛擬模型實時融合,以形成虛擬與真實環(huán)境相融合的3D打印工作環(huán)境。通過Unity3D引擎發(fā)布應(yīng)用程序,將基于增強現(xiàn)實技術(shù)的3D打印輔助系統(tǒng)應(yīng)用于3D打印工作和課程教學(xué)中。
[參考文獻(xiàn)]
[1] LIN M,SAN L J,YU D.Construction of Robotic Virtual Laboratory System Based on Unity3D[C]//Proceedings of 3rd International Symposium on Application of Materials Science and Energy Materials,2019:261-267.
[2] 丁雨,林木.基于Unity3D的減速器裝配虛擬實訓(xùn)[J].中國設(shè)備工程,2018(2):99-100.
[3] 趙海英,陳洪,穆曉峰.基于定位與姿態(tài)感知的虛實漫游方法應(yīng)用研究[J].圖學(xué)學(xué)報,2016,37(1):110-114.
[4] 王衛(wèi)國,胡今鴻,劉宏.國外高校虛擬仿真實驗教學(xué)現(xiàn)狀與發(fā)展[J].實驗室研究與探索,2015(5):214-219.
[5] 趙琪,孫紅,孫艷梅,等.基礎(chǔ)醫(yī)學(xué)虛擬仿真實驗教學(xué)平臺構(gòu)建研究[J].實驗技術(shù)與管理,2016(11):135-138.
[6] 陳敏,劉曉秋,伍勝男.基于VRML技術(shù)虛擬機械設(shè)計實驗室的研究[J].機械設(shè)計,2007,24(2):68-70.
[7] LIU H,MEUSEI P,SEITZ N,et a1.The Modular Multisensory DLR-HIT-Hand[J].Mechanism and Machine Theory,2007,42(5):612-625.
收稿日期:2020-07-06
作者簡介:林木(1985—),男,遼寧丹東人,碩士,博士研究生,講師,研究方向:機械現(xiàn)代設(shè)計方法、機械CAD/CAE等。