■ 李欣/中國南方航空股份有限公司工程技術(shù)分公司（機務(wù)工程部）

0 引言

國家“十四五”規(guī)劃和2035 年遠景目標綱要將數(shù)字化轉(zhuǎn)型提高到了國民經(jīng)濟的高度。民航局提出智慧民航建設(shè)，以新一代信息技術(shù)為引領(lǐng)，對民航運行管理全流程進行數(shù)字化智能化發(fā)展。中南地區(qū)管理局同樣成立了民航維修新技術(shù)應(yīng)用研究項目組，南航作為核心成員單位參與其中，旨在充分利用現(xiàn)有科技發(fā)展成果，研究推動新技術(shù)在民航維修業(yè)的應(yīng)用。

基于上述要求，南航編制了數(shù)字化三年滾動規(guī)劃，打造以精細化構(gòu)型管理為支撐的數(shù)字化維修工程管理平臺。通過研究和探索，南航選擇以增強現(xiàn)實（AR）作為數(shù)字化的“慧眼”，實現(xiàn)構(gòu)型數(shù)據(jù)的實時采集與更新，同時達到增強維修品質(zhì)，降低安全風險與維修成本的目的。

1 機務(wù)維修與AR 技術(shù)融合性發(fā)展分析

AR 技術(shù)是近年來熱門的新型技術(shù)手段，它可以將虛擬內(nèi)容與現(xiàn)實世界相疊加，達到超越現(xiàn)實的感官體驗與應(yīng)用效果。如何將AR 技術(shù)的獨特優(yōu)勢，融合進傳統(tǒng)的機務(wù)維修場景，并與其高度契合是本節(jié)需要闡述的問題。

1.1 傳統(tǒng)機務(wù)維修局限性簡述

南航豐富的機型和廣布的站點，給公司帶來了很多的地緣優(yōu)勢和技術(shù)儲備，但也同時帶來巨大的挑戰(zhàn)，安全保障要求高、維修對象復(fù)雜度高、資源調(diào)度難度大、人員技能要求高等問題一直伴隨著機務(wù)維修工作。具體到機務(wù)維修的某些場景中，會存在如下典型問題：

1） 工卡執(zhí)行方面，很難做到完全的“看一步，做一步，簽一步”，存在工作中斷的風險，且發(fā)生過因人為因素方面的錯、忘、漏現(xiàn)象，給飛機帶來了安全隱患。

2） 飛機排故方面，經(jīng)驗不足或技能欠佳的工作者時有發(fā)生排故質(zhì)量不高的現(xiàn)象，在增加維修成本的同時還有可能造成飛機延誤，給公司帶來極大的損失。

3） 航空器損傷檢測方面，此項工作對人員和儀器設(shè)備要求較高，如何采用更加有效的技術(shù)手段確保精準探測航空器損傷是需要解決的難題。

4） 人員培訓(xùn)方面，通過培訓(xùn)可提高員工技能水平，激發(fā)員工的工作熱情，從而增強飛機的維修品質(zhì)。如何采用更加高效合理的培訓(xùn)手段是機務(wù)培訓(xùn)部門需要持續(xù)考慮的問題。

南航一直在創(chuàng)新性采用更先進的管理理念與技術(shù)手段來解決上述問題，其中對于AR 技術(shù)的應(yīng)用則有顯而易見的改善效果。

1.2 人+AR 新模式探索

人+AR 的模式是維修業(yè)發(fā)展史上一個革命性的變革。AR 的引入打通了人與機器連接的最后一米，結(jié)合多種主體數(shù)字化后，將會實現(xiàn)針對不同場景下多個數(shù)字化主體協(xié)同合作，實現(xiàn)基于全新人機交互的維修方式變革。隨著智能維修的不斷發(fā)展，維修現(xiàn)場將由以人為主的“單兵作戰(zhàn)”，慢慢向以“人+AR眼鏡”為主轉(zhuǎn)變，實現(xiàn)完全的數(shù)據(jù)互聯(lián)互通，以及“輕裝備，重場域” 的數(shù)字化智能維修方式。

“駱都督膽子其實不大，但是他也不蠢，今日司禮監(jiān)為閣老出面，是犯了錦衣衛(wèi)的大忌——錦衣衛(wèi)絕不會放任內(nèi)閣與司禮監(jiān)聯(lián)手的?！狈綇脑瓶嘈σ宦?，“而且錦衣衛(wèi)監(jiān)視朝臣這種事……也算是駕輕就熟了，我敢保證，他們派出的監(jiān)視人手，絕對讓你抓不到任何把柄！所以閣老，千萬要暫且忍耐，不能輕舉妄動！”

2 AR 技術(shù)環(huán)境設(shè)備搭建研究

如何能將AR 技術(shù)的優(yōu)勢最大化地賦能傳統(tǒng)維修方式，直接的“拿來主義”并不可取，南航對此做了一系列充分的準備，研究出適合南航的環(huán)境需求及設(shè)備規(guī)范，并采取針對性方案措施。

2.1 5G 環(huán)境搭建

AR 眼鏡系統(tǒng)能否順暢運行，高速率低時延的網(wǎng)絡(luò)環(huán)境搭建是重中之重的基礎(chǔ)工作。今年南航與中國電信在廣州正式簽約“智慧機務(wù)”5G 專網(wǎng)，標志著全國首個民航維修領(lǐng)域5G 專網(wǎng)正式啟動。中國電信充分發(fā)揮“云-網(wǎng)-安”高度融合的數(shù)字化能力優(yōu)勢，為南航提供了一張廣域接入、云邊協(xié)同、安全可信的全國5G 定制專網(wǎng)，并且部署了1 萬多臺終端設(shè)備，將5G 網(wǎng)絡(luò)信號全面覆蓋南航22 家維修單位。

2.2 硬件標準

AR 眼鏡系統(tǒng)最核心的就是顯示及相關(guān)技術(shù)，包括透過率、透視偏差、亮度對比度、分辨率顯示角度等需要滿足工作者對于現(xiàn)有工作場景的需求；結(jié)構(gòu)設(shè)計規(guī)范方面，安全性、舒適性和擴展性都是需要考慮的指標；高擴展性，可以快速連接如測距模組、雷達模組、測溫模組、便攜探頭等多種設(shè)備，適應(yīng)不同的維修檢查環(huán)境；電源要求對AR 眼鏡同樣非常重要，通過優(yōu)化芯片、顯示等提升續(xù)航能力，確保可以足夠完成一定的作業(yè)量；嘈雜的航空維修現(xiàn)場需要設(shè)備有噪聲抑制和后聲音還原能力；頭戴式攝像頭必須要解決防抖、防眩暈的問題，降低暈動癥等。

2.3 軟件標準

軟件是AR 眼鏡系統(tǒng)的核心價值點。如果沒有精準的圖像識別和人工智能（AI）算法，就不能給工作者提供精準有效的輔助信息，眼鏡的價值就大打折扣。

圖像識別一般需要包括圖像采集、圖像處理、特征提取和圖像識別。首先采用AR 眼鏡對圖像進行采集，然后通過圖像增強、降噪、圖像分割、邊緣檢測等手段處理圖像識別過程中的關(guān)鍵步驟，然后將關(guān)鍵的信息利用計算機圖像信息進行特征提取，最后針對飛機上的每個維修項目建立開發(fā)識別模型，形成一套完整的飛機維修智能圖像識別算法。

圖像識別之后，就需要通過后臺的AI 算法進行分析，自動給出輔助建議提示。構(gòu)建AI 算法的核心則是構(gòu)建面向飛機維修的知識圖譜。首先要進行知識庫的構(gòu)建，通過樣本數(shù)據(jù)學(xué)習(xí)建立關(guān)系抽取模型；然后進行知識庫的存儲，抽取和存儲各故障信息及關(guān)系，逐步構(gòu)建飛機維修知識圖譜，并通過可視化方式展示；最后利用構(gòu)建的故障維修智能化平臺進行維修信息智能查詢和知識問答，根據(jù)查詢到的信息輔助故障原因分析和維修決策，與AR 眼鏡相結(jié)合，直接為AR 眼鏡提供決策信息支持。

3 基于AR 的工作新方式

完成了AR 技術(shù)環(huán)境設(shè)備搭建的準備工作后，就可以使用AR 眼鏡改善機務(wù)維修四個方面的典型問題。

3.1 AR 工卡

執(zhí)行AR 工卡的步驟大致如下，首先從結(jié)構(gòu)化系統(tǒng)中獲取工卡信息，按照需要下載執(zhí)行的工卡，在智能眼鏡和手持終端上顯示并引導(dǎo)完成相關(guān)任務(wù)，然后針對關(guān)鍵流程（滑油口蓋等）進行AI識別，最后作業(yè)執(zhí)行完成后進行電子簽名確認，將作業(yè)全程產(chǎn)生的資料上傳到系統(tǒng)。在工卡下載和執(zhí)行時，以消息形式通知到平臺或相關(guān)人員，對執(zhí)行過程中的視頻添加水印，例如時間、航班號、執(zhí)行人等，將工卡執(zhí)行情況、視頻等形成一份簡單報告。重點流程示意圖如圖1 所示。

圖1 AR 工卡執(zhí)行示意圖

使用AR 工卡還具備如下亮點特色，例如工作程序中的風險點梳理嵌入到了AR 眼鏡的使用中，實現(xiàn)工作中的即時提醒。通過建立模型算法，還能夠?qū)χ匾踩?jié)點的場景進行AI 識別訓(xùn)練，輔助人的檢查，將安全關(guān)口前移。當狀態(tài)異常時會發(fā)出提醒，并拒絕后續(xù)步驟的繼續(xù)執(zhí)行。例如識別飛機滑油口蓋狀態(tài)，當滑油口蓋未正確蓋好時發(fā)出提醒，經(jīng)過南航多次測試驗證，目前識別率可以達到98%以上，AI 識別過程達到毫秒級。工作者還可以自行對施工中的疑似點進行標記，所有的風險點和疑似點都會被記錄并列入復(fù)查清單，確保維修安全。施工中的文字、圖片或視頻多種信息流也會被實時記錄，提供更加豐富的維修記錄形式，或生成多維綜合性施工報告。

現(xiàn)如今，南航的AR 工卡項目已經(jīng)在南航河南維修廠完成了三百余次的使用，完全滿足正常的航線業(yè)務(wù)需求。

3.2 AR 排故

AR 排故，可分為個人排故與后臺支援兩部分。個人排故是利用AR 眼鏡識別飛機故障信息，后臺同步調(diào)用知識庫，推送排故指導(dǎo)方案，輔助工作者進行高質(zhì)量的排故。后臺支援則是建立機務(wù)AR 遠程協(xié)助平臺，通過AR 眼鏡把現(xiàn)場人員的視覺傳達給遠程專家，同時把遠程專家的專業(yè)知識帶到現(xiàn)場，讓遠在千里之外的專業(yè)指導(dǎo)近在眼前，很好地解決了企業(yè)需求痛點。

現(xiàn)在南航AR 遠程協(xié)助平臺已經(jīng)與商飛進行了密切的合作，這是南航AR技術(shù)平臺初次嘗試開放接口與飛機制造廠商合作，將系統(tǒng)嵌入商飛全科急診室遠程會診系統(tǒng)。借助AR 眼鏡實現(xiàn)ARJ21 飛機廠家以第一視角介入排故工作，以三方實時協(xié)作的方式大大降低了溝通的時間，縮短了飛機停場時間。與商飛合作服務(wù)平臺示意圖如圖2 所示。

圖2 南航與商飛合作服務(wù)平臺工作流程示意圖

3.3 AR 航空器損傷檢測

通過AR 眼鏡系統(tǒng)可實現(xiàn)飛機表面缺陷的檢測，并將缺陷的位置進行標記；將缺陷結(jié)果上傳到數(shù)據(jù)中心，并按缺陷類別存儲，按需推送至AR 終端，飛機檢修人員根據(jù)缺陷數(shù)據(jù)進行缺陷處理。

在飛機機庫四周分為上下兩層，布局若干圖像采集單元。每個圖像采集單元由攝像機和二維旋轉(zhuǎn)臺構(gòu)成，二維旋轉(zhuǎn)臺可以改變攝像機圖片拍攝的方位角和俯仰角，同時利用攝像機的電動變焦鏡頭，獲取一個區(qū)域內(nèi)的飛機表面圖片，通過方位、俯仰角度和鏡頭變焦參數(shù)，以及事先標定得到的采集單元，確定圖片拍攝空間參數(shù)。數(shù)據(jù)處理系統(tǒng)通過5G 網(wǎng)絡(luò)獲取測量系統(tǒng)的測量數(shù)據(jù)，利用圖像處理方法，對飛機表面圖片進行處理，對飛機表面缺陷特征，如劃傷、刻痕、凹坑、腐蝕等進行提取、定位和判別，實現(xiàn)圖片中缺陷結(jié)果輸出。結(jié)合圖像拍攝的圖像采集單元序號以及拍攝空間參數(shù)，在飛機機身上完成缺陷特征定位。最后通過5G 網(wǎng)絡(luò)回傳判斷結(jié)果至AR 終端，對飛機表面缺陷的異常結(jié)果進行人工核查。

3.4 AR 培訓(xùn)

談起輔助培訓(xùn)的高科技手段，第一印象首先會想到VR（虛擬現(xiàn)實）技術(shù)。機務(wù)工程師利用該技術(shù)，逼真模擬飛機維修的現(xiàn)實場景，從而進行繞機檢查、部件位置識別、航線例行工作和發(fā)動機維修等相關(guān)工作的交互性培訓(xùn)。實際上，使用AR 技術(shù)對提升一線人員教學(xué)品質(zhì)同樣非常明顯，AR 技術(shù)重點可用于進行飛機機型的實操培訓(xùn)中。一般機型的實操項目會包含部件位置識別、功能測試/操作測試、拆卸/安裝、模擬排故等，工作者接近真實飛機進行實操培訓(xùn)時，AR 眼鏡可以識別含實操內(nèi)容要求的飛機關(guān)鍵位置，并給出實操要點和注意事項，使工作者在進行實操時思路更清晰，步驟更標準，實操質(zhì)量更加有保證。

4 結(jié)束語

基于AR 系統(tǒng)的工作方式對航空維修領(lǐng)域帶來的提升非常明顯，不僅可以顯著降低飛機維修成本、提高飛機維修的質(zhì)量、效率和航空安全水平，而且實時客觀的數(shù)據(jù)采集存儲還可作為航空公司的寶貴數(shù)據(jù)資源，用于精準化飛機構(gòu)型管理、例行飛機維護與排故等多個方面。南航機務(wù)一直不斷致力于打造基于AR 技術(shù)的維修新模式，并與中國電信、中國商飛、亮亮視野科技有限公司、清華大學(xué)等眾多合作伙伴一起持續(xù)進行相關(guān)技術(shù)的探索研究與驗證升級。因此筆者相信，在未來的民航機務(wù)維修領(lǐng)域的各項工作中，AR 技術(shù)將會以更廣闊的專業(yè)崗位覆蓋、更全面的維護應(yīng)用、更深入的維護體驗得以呈現(xiàn)，給每位航空維修機務(wù)人員帶來不一樣的絕妙體驗。