摘" 要：該文研究基于增強現(xiàn)實（AR）技術(shù)和圖形渲染技術(shù)的飛行仿真虛擬儀表系統(tǒng)。利用實時光線追蹤技術(shù)和高精度圖像渲染算法，顯著提升虛擬儀表的視覺真實感。結(jié)合AR技術(shù)，飛行員能夠在仿真環(huán)境中實時獲取動態(tài)調(diào)整的飛行信息，并通過手勢識別和語音控制實現(xiàn)交互式操作。研究結(jié)果表明，AR與圖形渲染技術(shù)的結(jié)合在提高飛行仿真系統(tǒng)的真實感、操作便捷性和安全性方面具有顯著優(yōu)勢，為飛行訓練和飛行器設計提供新的發(fā)展方向。

關(guān)鍵詞：飛行仿真；增強現(xiàn)實；圖形渲染；虛擬儀表；交互式操作

中圖分類號：TP391.9" " " 文獻標志碼：A" " " " " 文章編號：2095-2945（2024）33-0013-04

Abstract： This paper studies a flight simulation virtual instrument system based on augmented reality（AR） technology and graphics rendering technology. Use real-time ray tracing technology and high-precision image rendering algorithms to significantly improve the visual realism of virtual instruments. Using AR technology， pilots can obtain dynamically adjusted flight information in real time in the simulation environment， and realize interactive operations through gesture recognition and voice control. The research results show that the combination of AR and graphics rendering technology has significant advantages in improving the realism， operational convenience and safety of flight simulation systems， providing a new development direction for flight training and aircraft design.

Keywords： flight simulation; augmented reality （AR）; graphics rendering; virtual instrument; interactive operation

飛行仿真系統(tǒng)是飛行員培訓、飛行器設計和評估的重要工具，其中虛擬儀表系統(tǒng)作為關(guān)鍵組成部分，對提升仿真系統(tǒng)的真實感和效果至關(guān)重要。近年來，隨著增強現(xiàn)實（Augmented Reality， AR）技術(shù)和圖形渲染技術(shù)的發(fā)展，將其應用于飛行仿真虛擬儀表系統(tǒng)中，成為了新的研究方向[1]。AR與圖形渲染技術(shù)的結(jié)合，為飛行仿真系統(tǒng)帶來了新的突破。盡管已有研究證明了AR和圖形渲染技術(shù)在飛行仿真中的潛力，但仍存在一些局限性。首先，大多數(shù)研究主要集中在技術(shù)可行性和初步應用驗證上，缺乏系統(tǒng)性和大規(guī)模的用戶實驗數(shù)據(jù)。其次，實時光線追蹤技術(shù)的計算復雜度較高，對硬件性能要求較高，尚需進一步優(yōu)化[2]。最后，現(xiàn)有的交互式操作方法雖然提高了操作效率，但在復雜操作場景下的穩(wěn)定性和準確性仍需改進。本文旨在探討基于增強現(xiàn)實技術(shù)和圖形渲染技術(shù)的飛行仿真虛擬儀表系統(tǒng)的關(guān)鍵技術(shù)和應用前景。

1" 系統(tǒng)架構(gòu)

基于增強現(xiàn)實技術(shù)和圖形渲染技術(shù)的飛行仿真虛擬儀表系統(tǒng)的總體架構(gòu)如圖1所示。該系統(tǒng)主要由數(shù)據(jù)采集模塊、圖形渲染模塊、用戶界面模塊和物理模擬模塊4大部分組成。

2" 圖形渲染技術(shù)的創(chuàng)新應用

2.1" 圖像渲染算法應用

本文提出的圖形渲染技術(shù)的創(chuàng)新算法是基于實時光線追蹤的虛擬儀表渲染。在該算法中，利用實時光線追蹤技術(shù)生成逼真的虛擬儀表顯示，以提升飛行仿真系統(tǒng)的真實感和視覺效果。利用先進的圖形渲染技術(shù)，可以實現(xiàn)高度逼真的儀表顯示效果，包括細致的儀表面板紋理、逼真的光照和陰影效果等[3]。這種逼真的顯示可以增強飛行員對儀表的認知和理解，并提升訓練的真實感。

在傳統(tǒng)的分析仿真系統(tǒng)中，虛擬儀表的基礎(chǔ)模型圖像雖然也有一定程度的渲染，但在視覺真實感方面存在顯著不足，難以滿足高逼真度飛行仿真系統(tǒng)的需求。具體存在以下不足之處。

缺乏光照效果?；A(chǔ)模型圖像中沒有模擬任何光源，因此無法呈現(xiàn)出真實環(huán)境中的光照與陰影效果。這使得圖像看起來較為平坦且缺乏立體感。

材質(zhì)與紋理簡單。儀表面板和指針的材質(zhì)與紋理處理較為簡單，缺乏細節(jié)表現(xiàn)，使得整體視覺效果不夠真實。

光照效果圖像通過添加光照和材質(zhì)效果顯著提升了視覺真實感。這種方法在以下幾個方面進行了優(yōu)化。

模擬光源。通過在圖像中添加光源，模擬現(xiàn)實環(huán)境中的光照效果。光源的位置、強度和類型對最終渲染結(jié)果有顯著影響。例如，本示例中使用了局部光源，模擬了從一個特定位置照射的光線。

材質(zhì)處理。通過為對象設置材質(zhì)屬性（如shiny材質(zhì)），使對象表面反射光線，呈現(xiàn)出更真實的視覺效果。Gouraud光照模型用于平滑光照效果，增強了物體的立體感和細節(jié)表現(xiàn)。

陰影效果。光源的引入使對象可以投射陰影，增加了圖像的深度感和真實感。這對于模擬真實的飛行儀表環(huán)境至關(guān)重要，有助于飛行員在訓練過程中獲得更逼真的視覺體驗。

得到的圖像對比效果如圖2所示。

通過引入光照和材質(zhì)處理技術(shù)，優(yōu)化后的虛擬儀表渲染算法顯著提升了圖像的真實感和視覺效果。通過這種對比和分析，可以清晰地看到算法優(yōu)化在虛擬儀表渲染中的重要性和實際效果。這不僅有助于增強飛行仿真系統(tǒng)的真實感和沉浸感，還能提高飛行員對儀表的認知和理解，從而提升訓練效果。

2.2" 虛擬儀表的創(chuàng)新應用

2.2.1" 逼真的儀表顯示

圖形渲染技術(shù)使得虛擬儀表的顯示方案可以靈活定制，包括顯示布局、顏色主題、數(shù)據(jù)呈現(xiàn)方式等。飛行員可以根據(jù)個人喜好或特定訓練需求自定義儀表顯示，從而提高訓練的針對性和效果。

2.2.2" 多視角顯示支持

利用圖形渲染技術(shù)，可以實現(xiàn)多視角顯示支持，即同時在飛行員視角和教練員或觀察員視角顯示虛擬儀表。這種應用可以提升培訓效果，使教練員能夠?qū)崟r監(jiān)測飛行員的操作和儀表讀數(shù)情況，并給予及時的反饋和指導。

2.3" 算法優(yōu)化點

2.3.1" 光線追蹤算法

相比于基礎(chǔ)模型圖像，光照效果圖像中引入了基本的光線追蹤算法，以模擬光源、反射和陰影。這是一個關(guān)鍵的算法優(yōu)化點，通過計算光線在場景中的傳播和反射路徑，可以生成更真實的光照效果。

2.3.2" 材質(zhì)和紋理映射

優(yōu)化后的算法可以支持更復雜的材質(zhì)和紋理映射，使得對象表面能夠更加逼真地表現(xiàn)出不同材質(zhì)（如金屬、玻璃等）的特性。

2.3.3" 實時計算與渲染

在高性能計算和圖形處理器（GPU）的支持下，實時計算和渲染技術(shù)得以實現(xiàn)，使得光照和陰影效果可以動態(tài)更新。這對于飛行仿真系統(tǒng)中的實時反饋至關(guān)重要。

在未來的工作中，可以進一步探索更先進的圖形渲染技術(shù)和光線追蹤算法，以實現(xiàn)更加逼真和高效的虛擬儀表顯示。

3" 增強現(xiàn)實技術(shù)的創(chuàng)新應用

3.1" 增強現(xiàn)實技術(shù)原理

增強現(xiàn)實（Augmented Reality， AR）技術(shù)的原理是通過將計算機生成的虛擬信息疊加到現(xiàn)實世界中[4]，從而增強用戶對現(xiàn)實環(huán)境的感知。AR系統(tǒng)通常包括一個顯示設備（如AR眼鏡或頭盔）、傳感器（如攝像頭、加速度計、陀螺儀等）和處理單元。顯示設備用于將虛擬信息呈現(xiàn)在用戶視野中，而傳感器用于捕捉用戶的環(huán)境和動作數(shù)據(jù)，處理單元則負責將這些數(shù)據(jù)實時處理并生成相應的虛擬信息。

在本研究中，我們利用增強現(xiàn)實技術(shù)將經(jīng)過高精度圖形渲染的虛擬儀表投影到飛行員的視野中。這種投影不僅使虛擬儀表與現(xiàn)實環(huán)境無縫融合，還能夠根據(jù)飛行員的頭部運動進行動態(tài)調(diào)整。具體而言，當飛行員佩戴AR設備時，設備內(nèi)置的傳感器會實時捕捉飛行員的頭部姿態(tài)和位置變化。通過計算這些數(shù)據(jù)，可以確定飛行員當前的視角和注視點。處理單元將根據(jù)這些信息調(diào)整虛擬儀表的顯示位置和角度，使其始終處于飛行員的最佳視野范圍內(nèi)。AR設備采用的是HTC VIVE的頭戴顯示器，如圖3所示。

這種動態(tài)調(diào)整機制使得飛行員在查看儀表數(shù)據(jù)時，無需轉(zhuǎn)移視線或改變頭部姿態(tài)，從而大大提升了飛行操作的便捷性和安全性。虛擬儀表不僅提供了與傳統(tǒng)儀表相同的飛行數(shù)據(jù)，如速度、高度、航向等，還可以疊加更多實時信息，如導航路徑、警告提示等。這種增強現(xiàn)實技術(shù)的應用，不僅改善了飛行員對飛行信息的獲取方式，還提高了飛行訓練和操作的效率和安全性。

通過這種方式，增強現(xiàn)實技術(shù)將復雜的飛行數(shù)據(jù)可視化，并以一種直觀、易訪問的方式呈現(xiàn)給飛行員，使其能夠在不分散注意力的情況下，全面掌握飛行器的狀態(tài)和周圍環(huán)境，從而做出更快速和準確的決策。

3.2" 虛擬儀表界面的改進

實際飛行系統(tǒng)中的儀表裝置通常包括主要飛行儀表（如高度表、空速表、姿態(tài)指示器、航向指示器和垂直速度表）、引擎儀表（如發(fā)動機轉(zhuǎn)速表、燃油表、油壓表和油溫表）、導航儀表、通信設備以及環(huán)境控制和警告系統(tǒng)，如圖4所示。

增強現(xiàn)實技術(shù)生成的虛擬儀表信息包括飛行狀態(tài)信息（如高度、速度、姿態(tài)、航向）、引擎和系統(tǒng)狀態(tài)信息、導航和地圖信息、警告和提示信息以及環(huán)境和氣象信息，如圖5所示。

對比實際飛行中的儀表盤和經(jīng)過渲染后的虛擬儀表，實際飛行中的儀表盤是一個物理硬件面板，包含多個獨立的儀表和顯示器，各儀表通過指針、刻度盤或數(shù)字顯示提供特定的飛行數(shù)據(jù)。飛行員需要通過查看不同的儀表來獲取飛行狀態(tài)、引擎狀態(tài)、導航信息等。這種傳統(tǒng)儀表布局在緊急情況下可能導致飛行員需要在多個儀表之間頻繁切換，增加認知負荷和操作復雜度。經(jīng)過渲染后的虛擬儀表通過增強現(xiàn)實技術(shù)將所有關(guān)鍵飛行信息整合到一個統(tǒng)一的虛擬顯示中。飛行員佩戴AR設備后，能夠在視野中實時看到經(jīng)過優(yōu)化處理的虛擬儀表，這些虛擬儀表能夠動態(tài)調(diào)整顯示位置，確保飛行員在任何頭部姿態(tài)下都能方便地查看重要信息。同時，虛擬儀表能夠疊加地形、導航標志等增強信息，顯著提升空間感知和導航?jīng)Q策能力。虛擬儀表的集成與可視化處理，使得信息更加集中和直觀，降低了飛行員的認知負荷，提升了操作效率和安全性。

通過增強現(xiàn)實技術(shù)優(yōu)化處理后的虛擬儀表主要實現(xiàn)了增強的空間感知、實時動態(tài)調(diào)整、信息集成與可視化處理以及自定義和靈活性等特征[5]。利用AR技術(shù)在飛行員周圍創(chuàng)建增強的空間感知，例如在駕駛艙內(nèi)疊加虛擬地圖、導航標志或地形特征，幫助飛行員更好地理解飛行環(huán)境，提升空中導航和飛行決策能力。虛擬儀表根據(jù)飛行員頭部運動實時調(diào)整顯示位置和角度，使飛行員無需轉(zhuǎn)移視線即可查看儀表數(shù)據(jù)，大大提高了操作效率和安全性。虛擬儀表將傳統(tǒng)儀表信息進行集成與可視化處理，使信息顯示更加直觀和集中，減少了飛行員在多個儀表之間切換的頻率。虛擬儀表顯示方案可以根據(jù)飛行員需求進行自定義，包括顯示布局、顏色主題、數(shù)據(jù)呈現(xiàn)方式等，提升用戶體驗。

通過這種對比分析，可以看出增強現(xiàn)實技術(shù)下的虛擬儀表在信息整合、空間感知、實時動態(tài)調(diào)整和用戶體驗等方面具有顯著優(yōu)勢，從而為飛行員提供了更為高效和安全的飛行輔助系統(tǒng)。

3.3" 交互式操作拓展

交互式操作方面，增強現(xiàn)實（AR）技術(shù)結(jié)合手勢識別和語音控制技術(shù)，實現(xiàn)了對虛擬儀表的交互式操作。這種技術(shù)融合使飛行員能夠通過自然的手勢或語音指令與虛擬儀表進行互動，顯著提高了操作效率和便利性。具體而言，飛行員可以使用手勢來切換儀表顯示、調(diào)整設置或執(zhí)行特定操作，而無需依賴傳統(tǒng)的物理按鈕或控制面板。同時，語音控制技術(shù)允許飛行員通過口頭指令快速訪問和操作虛擬儀表，減少了手動操作的復雜性和干擾。這些交互式操作功能的引入，不僅提升了飛行員的用戶體驗，還在一定程度上改善了飛行操作的流暢性和安全性，為復雜飛行任務提供了更加直觀和高效的解決方案。

4" 結(jié)束語

本文探討了基于增強現(xiàn)實（AR）技術(shù)和圖形渲染技術(shù)的飛行仿真虛擬儀表系統(tǒng)的關(guān)鍵技術(shù)與應用前景。通過引入實時光線追蹤和高精度圖像渲染算法，虛擬儀表的視覺真實感顯著提升，使得飛行員能夠在仿真環(huán)境中獲得更加逼真的飛行體驗。同時，AR技術(shù)的應用不僅增強了飛行員對飛行信息的獲取方式，還通過交互式操作功能提高了飛行操作的便捷性和安全性。盡管現(xiàn)有技術(shù)仍有優(yōu)化空間，但本研究表明，AR與圖形渲染技術(shù)的結(jié)合在飛行仿真中具有廣闊的應用前景，有望進一步推動飛行訓練和飛行器設計的發(fā)展。

參考文獻：

[1] 陳一民，李啟明，馬德宜，等.增強虛擬現(xiàn)實技術(shù)研究及其應用[J].上海大學學報（自然科學版），2011，17（4）：412-428.

[2] 王海峰，陳慶奎.圖形處理器通用計算關(guān)鍵技術(shù)研究綜述[J].計算機學報，2013，36（4）：757-772.

[3] 岳玉芳，謝曉鋼，安建祝，等.某ATP訓練模擬裝置仿真實現(xiàn)技術(shù)[J].兵工自動化，2015，34（7）：1-5.

[4] 王宇希，張鳳軍，劉越.增強現(xiàn)實技術(shù)研究現(xiàn)狀及發(fā)展趨勢[J].科技導報，2018，36（10）：75-83.

[5] 尹旭悅，范秀敏，王磊，等.航天產(chǎn)品裝配作業(yè)增強現(xiàn)實引導訓練系統(tǒng)及應用[J].航空制造技術(shù)，2018，61（Z1）：48-53.