摘 要： 試驗(yàn)鑒定改革是美國國防采辦體系改革和美軍數(shù)字化轉(zhuǎn)型的重要組成。 面對人工智能、 自主等新興技術(shù)發(fā)展， 以及多域戰(zhàn)、 全域戰(zhàn)等體系化作戰(zhàn)要求給武器裝備能力交付帶來的試驗(yàn)鑒定挑戰(zhàn)， 美國國防部積極推動(dòng)試驗(yàn)鑒定領(lǐng)域的數(shù)字化轉(zhuǎn)型， 其中一項(xiàng)重要舉措便是提出試驗(yàn)鑒定即連續(xù)體概念， 以期借助數(shù)字工程理念， 持續(xù)開展試驗(yàn)策略與鑒定流程優(yōu)化， 進(jìn)一步提升武器裝備采辦效率與質(zhì)量。 本文簡述了試驗(yàn)鑒定即連續(xù)體的發(fā)展情況， 分析研究了其框架內(nèi)容、 概念內(nèi)涵， 以及具體實(shí)施所需的能力要素， 給出了有關(guān)武器裝備試驗(yàn)鑒定數(shù)字化轉(zhuǎn)型發(fā)展的啟示。

關(guān)鍵詞： 試驗(yàn)鑒定即連續(xù)體； 數(shù)字化轉(zhuǎn)型； 數(shù)字工程； 使命任務(wù)工程； 系統(tǒng)工程

中圖分類號： TJ760

文獻(xiàn)標(biāo)識碼： A

文章編號： 1673-5048（2024）05-0034-07

DOI： 10.12132/ISSN.1673-5048.2024.0114

0 引 言

近年來， 大國競爭日趨激烈， 為貫徹落實(shí)“第三次抵消戰(zhàn)略”重要舉措， 并應(yīng)對中俄等潛在對手在人工智能、 自主、 量子計(jì)算、 6G等新興技術(shù)方面前所未有的加速創(chuàng)新， 美國國防部正在大力推進(jìn)國防采辦政策制度改革， 特別是試驗(yàn)與鑒定（T&E）領(lǐng)域的變革轉(zhuǎn)型。

同時(shí)， 數(shù)字工程（DE）的持續(xù)推進(jìn)， 為試驗(yàn)鑒定領(lǐng)域變革轉(zhuǎn)型帶來新的要求和方法， 人工智能、 有人-無人協(xié)同等作戰(zhàn)能力倍增技術(shù)和聯(lián)合全域作戰(zhàn)等體系化作戰(zhàn)概念給武器裝備能力交付提出新的要求， 美國國防部推出試驗(yàn)鑒定即連續(xù)體（T&EaaC， Test and Evaluation as a Continuum）概念， 以期利用數(shù)字工程方法， 促進(jìn)試驗(yàn)鑒定與使命任務(wù)工程（ME）、 系統(tǒng)工程（SE）的深度融合， 形成貫穿系統(tǒng)全生命周期的連續(xù)且不斷迭代的過程， 推動(dòng)試驗(yàn)鑒定數(shù)字化轉(zhuǎn)型， 以此滿足美軍對于“以相關(guān)速度”交付能力的要求［1］。

本文通過系統(tǒng)梳理美國國防部試驗(yàn)鑒定即連續(xù)體的發(fā)展背景與歷程， 對其主要內(nèi)容、 概念內(nèi)涵和實(shí)施能力要素進(jìn)行了分析研究， 并就有關(guān)武器裝備試驗(yàn)鑒定數(shù)字化轉(zhuǎn)型發(fā)展提出了幾點(diǎn)啟示。

1 T&EaaC發(fā)展背景與歷程

1.1 產(chǎn)生背景

在美國國防采辦活動(dòng)（特別是重大能力采辦活動(dòng)）中， 目前試驗(yàn)鑒定范式的生成和執(zhí)行是以傳統(tǒng)串行過程進(jìn)行的， 主要通過依次實(shí)施承包商試驗(yàn)（CT）、 研制試驗(yàn)（DT）和作戰(zhàn)試驗(yàn)（OT）， 來實(shí)現(xiàn)系統(tǒng)能力交付。 雖然近年來美軍在裝備采辦流程中持續(xù)推行“左移”策略， 但結(jié)合部分承包商試驗(yàn)、 研制試驗(yàn)和/或作戰(zhàn)使用要素形成的一體化試驗(yàn)鑒定（IT&E）在很大程度上也依舊是串行的， 而且仍然需要分別為研制試驗(yàn)和作戰(zhàn)試驗(yàn)建立鑒定框架。 因此， 美軍認(rèn)為， 隨著多域戰(zhàn)、 全域戰(zhàn)等概念提出， 以及人工智能、 自主等新興技術(shù)的發(fā)展， 當(dāng)前的武器裝備試驗(yàn)鑒定方式存在著一些問題和挑戰(zhàn)。

（1） 從本質(zhì)上講， 承包商試驗(yàn)和研制試驗(yàn)側(cè)重于需求驗(yàn)證， 而作戰(zhàn)試驗(yàn)則專注于評估任務(wù)有效性和適用性。 通常， 作戰(zhàn)試驗(yàn)在系統(tǒng)研制/開發(fā)后期進(jìn)行， 這種做法缺乏在項(xiàng)目早期對系統(tǒng)在真實(shí)任務(wù)場景中性能的考慮和試驗(yàn)鑒定， 從而造成了某些場景中影響性能的問題過晚暴露。 而當(dāng)問題出現(xiàn)時(shí)， 特別是當(dāng)系統(tǒng)研制/開發(fā)的技術(shù)和組件成熟度較低時(shí)， 解決這些問題將變得異常困難。 同

收稿日期： 2024-07-09

作者簡介： 楊濤（1986-）， 男， 陜西勉縣人， 高級工程師。

*通信作者： 張毅（1986-）， 男， 貴州臺江人， 碩士， 高級工程師。

時(shí)， 由于項(xiàng)目規(guī)劃和資金安排通常不包括全面解決投入使用前發(fā)現(xiàn)的重大問題所需的時(shí)間和資源， 所以， 為了

在規(guī)定期限內(nèi)完成交付， 項(xiàng)目往往會調(diào)整所需的系統(tǒng)功能或性能指標(biāo)， 這種做法極大降低了向作戰(zhàn)人員交付能

力的效能。

（2） 目前這種串行的試驗(yàn)鑒定方式不僅是從有限數(shù)量的資源密集型離散事件中收集有限的信息集， 而且沒有充分考慮在整個(gè)研制過程中、 部署與使用保障期間通過持續(xù)學(xué)習(xí)而不斷演進(jìn)的人工智能（AI）/機(jī)器學(xué)習(xí)（ML）支持系統(tǒng)。

（3） 系統(tǒng)工程領(lǐng)域通常對系統(tǒng)工程“V”模型以串行方式進(jìn)行解釋， 這導(dǎo)致試驗(yàn)方過晚參與到真實(shí)任務(wù)場景中的系統(tǒng)性能評估， 從而進(jìn)一步推遲了試驗(yàn)階段能夠提供的重要反饋信息， 而這些信息正是魯棒系統(tǒng)， 尤其是AI/自主系統(tǒng)設(shè)計(jì)、 開發(fā)和持續(xù)改進(jìn)所必需的。

為應(yīng)對日益復(fù)雜多變的威脅環(huán)境， 在美國國防部試驗(yàn)鑒定組織體（Test and Evaluation Enterprise）總體試驗(yàn)與鑒定戰(zhàn)略指引下， 作戰(zhàn)試驗(yàn)鑒定局（DOT&E）以問題和挑戰(zhàn)為導(dǎo)向， 開始與各軍種試驗(yàn)鑒定主管以及國防部長辦公室（OSD）下屬的試驗(yàn)鑒定組織機(jī)構(gòu)協(xié)調(diào)開展試驗(yàn)鑒定數(shù)字化轉(zhuǎn)型研究。 其中， 美軍計(jì)劃結(jié)合數(shù)字工程方法， 將試驗(yàn)與鑒定工作作為一個(gè)連續(xù)體， 集成到系統(tǒng)工程和使命任務(wù)工程中， 試驗(yàn)鑒定即連續(xù)體概念應(yīng)運(yùn)而生［1］。

1.2 發(fā)展歷程

航空兵器 2024年第31卷第5期

楊 濤， 等： 美軍試驗(yàn)鑒定即連續(xù)體概念研究

早在2010年， 時(shí)任美國國防部采辦、 技術(shù)與后勤副部長， 研制試驗(yàn)鑒定局（DDT&E）局長Edward R. Greer曾提出一體化試驗(yàn)鑒定連續(xù)體的設(shè)想， 通過將試驗(yàn)鑒定工作前伸后延， 范圍覆蓋整個(gè)研制/開發(fā)和采辦過程， 即從里程碑A（進(jìn)入技術(shù)開發(fā)階段）前的裝備方案分析階段一直到后續(xù)作戰(zhàn)試驗(yàn)與鑒定（FOT&E）及里程碑C（進(jìn)入生產(chǎn)與部署階段）后的使用與保障階段， 同時(shí)引入系統(tǒng)工程理念， 在組件級研制/開發(fā)中實(shí)現(xiàn)良好的系統(tǒng)規(guī)范， 以此來提高承包商研制試驗(yàn)與鑒定（DT&E）、 政府研制試驗(yàn)與鑒定和政府作戰(zhàn)試驗(yàn)與鑒定（OT&E）的效率［2］。 但由于實(shí)施成本較高， 缺乏可互操作的數(shù)字工程環(huán)境與工具， 以及缺少統(tǒng)一數(shù)據(jù)策略來支撐整個(gè)試驗(yàn)鑒定階段與采辦壽命周期的完整端到端知識與數(shù)據(jù)共享等因素制約， 轉(zhuǎn)型發(fā)展緩慢［3］。

2018年， 美國國防部發(fā)布《國防部數(shù)字工程戰(zhàn)略》， 加速推動(dòng)數(shù)據(jù)整合和共享， 構(gòu)建了試驗(yàn)鑒定數(shù)字化轉(zhuǎn)型的總體依據(jù)， 表明美國國防采辦改革的大致方向， 將借助系統(tǒng)工程方法， 促進(jìn)數(shù)字工程在試驗(yàn)鑒定中的深化應(yīng)用［4-6］。 2020年11月， 美國國防部發(fā)布首版試驗(yàn)與鑒定指示文件DoDI 5000.89指出： “一體化試驗(yàn)和獨(dú)立鑒定是更大的試驗(yàn)鑒定連續(xù)體的一部分。 ”同時(shí)， 結(jié)合《國防部數(shù)字工程戰(zhàn)略》要求， DoDI 5000.89指示還要求： “采辦項(xiàng)目要在任務(wù)背景下對系統(tǒng)進(jìn)行數(shù)字表征， 并（盡可能）使用數(shù)字生態(tài)系統(tǒng)， 整合權(quán)威的模型、 數(shù)據(jù)和試驗(yàn)工件（如試驗(yàn)用例、 計(jì)劃、 缺陷和結(jié)果）來源， 以提高整個(gè)一體化試驗(yàn)鑒定連續(xù)體的效率。 ”因此， 試驗(yàn)鑒定需要變革并采用數(shù)字工程戰(zhàn)略思想， 以改進(jìn)建模與仿真校核與驗(yàn)證（V&V）流程以及整個(gè)生命周期內(nèi)的試驗(yàn)鑒定評估［7-8］。

2021年5月， 美國空軍發(fā)布“數(shù)字工程的數(shù)字建設(shè)規(guī)范”， 概述了試驗(yàn)鑒定對于數(shù)字工程的重要性， 并強(qiáng)調(diào)試驗(yàn)鑒定必須與數(shù)字工程活動(dòng)相結(jié)合［9］。 與此同時(shí)， 美國國防部期望通過對試驗(yàn)鑒定支撐能力交付的方式進(jìn)行變革， 建立一種新的試驗(yàn)鑒定范式， 使試驗(yàn)鑒定活動(dòng)在整個(gè)能力生命周期內(nèi)（從使命任務(wù)工程最初階段持續(xù)到使用與保障階段）為當(dāng)前復(fù)雜的技術(shù)開發(fā)和部署決策提供支持， 以大大增強(qiáng)試驗(yàn)鑒定在以“相關(guān)速度”交付關(guān)鍵作戰(zhàn)能力方面的作用［10-11］。 緊接著， 2021年7月， 在國際試驗(yàn)鑒定協(xié)會（ITEA）第38屆試驗(yàn)與鑒定年會上， 美國國防部作戰(zhàn)試驗(yàn)鑒定局和研究與工程副部長辦公室（OUSD（R&E））研制試驗(yàn)、 鑒定與評估處（DTE&A）首次提及“試驗(yàn)鑒定即連續(xù)體”一詞， 初步將其闡述為： “所有試驗(yàn)（測試）都是連續(xù)進(jìn)行的， 在此過程中， 當(dāng)前的試驗(yàn)會根據(jù)先前的試驗(yàn)結(jié)果進(jìn)行迭代更新和完善［12］。 ”至此， 美國國防部指示DoDI 5000.89中描述的“更大的試驗(yàn)鑒定連續(xù)體”有了更進(jìn)一步的發(fā)展和完善。 一體化試驗(yàn)鑒定的轉(zhuǎn)型如圖1所示。

2022年6月， 美國國防部作戰(zhàn)試驗(yàn)鑒定局發(fā)布《2022財(cái)年作戰(zhàn)試驗(yàn)鑒定戰(zhàn)略更新》， 基于《國防部數(shù)字工程戰(zhàn)略》及其數(shù)字工程轉(zhuǎn)型， 總結(jié)提出了試驗(yàn)鑒定5大戰(zhàn)略支柱， 概述了變革試驗(yàn)鑒定基礎(chǔ)設(shè)施、 流程、 概念、 工具和人才隊(duì)伍的愿景， 以跟上技術(shù)、 威脅和作戰(zhàn)環(huán)境的快速演變［13-14］。 同年7月， 作為年度戰(zhàn)略更新的積極響應(yīng)， 針對多域作戰(zhàn)（MDO）對試驗(yàn)鑒定在自主/人工智能使能、 一體化、 彈性和敏捷等方面的挑戰(zhàn)， 為促進(jìn)試驗(yàn)鑒定轉(zhuǎn)型發(fā)展， 充分評估多域作戰(zhàn)環(huán)境中的戰(zhàn)斗能力， 美國國防部研制試驗(yàn)、 鑒定與評估處再次提出“試驗(yàn)鑒定即連續(xù)體”概念， 并明確指出試驗(yàn)鑒定即連續(xù)體概念建立在國防部2018年數(shù)字工程戰(zhàn)略基礎(chǔ)上， 通過使用數(shù)字工程使試驗(yàn)與鑒定成為系統(tǒng)工程和使命任務(wù)工程流程的組成部分， 不僅能支持單個(gè)系統(tǒng)的決策， 而且有助于實(shí)現(xiàn)國防部能力開發(fā)組合的知情管理［15］。

2023年3月， 美國國防部研制試驗(yàn)、 鑒定與評估處和美國海軍航空系統(tǒng)司令部（NASC）基于能力的試驗(yàn)鑒定辦公室正式聯(lián)合發(fā)布“試驗(yàn)鑒定即連續(xù)體”概念， 明確了“試驗(yàn)鑒定即連續(xù)體”的三大關(guān)鍵屬性內(nèi)容及三大能力要素， 并建議在復(fù)雜系統(tǒng)采辦中實(shí)施更加基于風(fēng)險(xiǎn)、 能力驅(qū)動(dòng)和一體化的復(fù)雜系統(tǒng)采辦試驗(yàn)鑒定方法［1， 3］。

2 T&EaaC框架內(nèi)容

2018年， 美國國防部在數(shù)字工程戰(zhàn)略中， 提出了5個(gè)關(guān)鍵目標(biāo)基礎(chǔ)［4］。 2022年， 作戰(zhàn)試驗(yàn)鑒定局新制定的戰(zhàn)略更新文件中， 總結(jié)提出了試驗(yàn)鑒定5大戰(zhàn)略支柱［12］。 在此基礎(chǔ)上， 依據(jù)戰(zhàn)略目標(biāo)和支柱衍生出總體框架， 試驗(yàn)鑒定即連續(xù)體主要構(gòu)成逐漸清晰［1］。 圖2所示為其總體框架。

如圖2所示， 試驗(yàn)鑒定即連續(xù)體的主要內(nèi)容包括： 以能力和結(jié)果為中心的試驗(yàn)； 敏捷、 可擴(kuò)展的鑒定框架； 增強(qiáng)的試驗(yàn)設(shè)計(jì)。 其中， 每個(gè)屬性內(nèi)容對于以“相關(guān)速度”交付能力都至關(guān)重要。

2.1 以能力和結(jié)果為中心的試驗(yàn)

以能力和結(jié)果為中心的試驗(yàn)又稱“以任務(wù)為中心的試驗(yàn)”， 旨在盡早關(guān)注軍事能力在投入使用時(shí)的性能表現(xiàn)。 美國國防部認(rèn)為， 需要在裝備采辦過程中“像作戰(zhàn)一樣進(jìn)行試驗(yàn)”， 并確保在承包商試驗(yàn)和研制試驗(yàn)期間進(jìn)行的早期工程和技術(shù)驗(yàn)證試驗(yàn)?zāi)軌蛱峁┲苯又С肿罱K在作戰(zhàn)試驗(yàn)的任務(wù)環(huán)境中進(jìn)行性能評估的各種信息。 所有承包商試驗(yàn)和研制試驗(yàn)活動(dòng)與任務(wù)的直接結(jié)合， 可讓決策者非常清晰地了解整個(gè)采辦過程中任務(wù)級能力性能， 并能更早洞悉與當(dāng)前及預(yù)計(jì)威脅環(huán)境和任務(wù)級能力性能相關(guān)的風(fēng)險(xiǎn)。 這種任務(wù)背景還有助于探究作戰(zhàn)彈性， 例如， 在高度動(dòng)態(tài)或競爭環(huán)境（包括與網(wǎng)絡(luò)空間攻擊造成的不利條件相關(guān)的環(huán)境）中作戰(zhàn)期間的彈性。

此外， 以能力和結(jié)果為中心的試驗(yàn)強(qiáng)調(diào)盡早關(guān)注試驗(yàn)的彈性， 以便優(yōu)先考慮對試驗(yàn)結(jié)果的響應(yīng)， 從而確定未來的試驗(yàn)要求和優(yōu)先級。 例如在賽博域， 美軍已開始將重點(diǎn)從傳統(tǒng)僅關(guān)注防范網(wǎng)絡(luò)威脅的“控制”方法， 轉(zhuǎn)向更關(guān)注任務(wù)背景、 不利影響、 對不利影響的早期識別， 以及更好的恢復(fù)能力。 未來， 隨著“需求”背景很可能從離散的關(guān)鍵性能參數(shù)和關(guān)鍵系統(tǒng)屬性演變?yōu)橥ㄟ^系統(tǒng)模型提供的“系統(tǒng)行為”之一， 連續(xù)試驗(yàn)過程將實(shí)現(xiàn)在基于模型的環(huán)境背景中， 對系統(tǒng)行為進(jìn)行更快速的評估。

因此， 作為一個(gè)重要基礎(chǔ)， 嚴(yán)格地執(zhí)行使命任務(wù)工程流程將提供有關(guān)國防部使命任務(wù)及執(zhí)行使命任務(wù)所需能力的表征， 從而實(shí)現(xiàn)系統(tǒng)需求的識別與更新。 然后， 利用基于模型的系統(tǒng)工程（MBSE）方法， 并使用共享能力表征， 可以對不斷演進(jìn)的武器系統(tǒng)（包括結(jié)合AI/ML的系統(tǒng)）進(jìn)行迭代式的試驗(yàn)與鑒定。

2.2 敏捷、 可擴(kuò)展的鑒定框架

隨著數(shù)字工程和試驗(yàn)鑒定改革的持續(xù)推進(jìn)， 美軍認(rèn)為， 當(dāng)前傳統(tǒng)的鑒定框架開發(fā)工作開始得太晚， 并且要跨科學(xué)技術(shù)（S&T）、 研制試驗(yàn)和作戰(zhàn)試驗(yàn)領(lǐng)域進(jìn)行整合， 實(shí)際效果較差。 要成功解決從使命任務(wù)工程到使用與保障階段的整個(gè)能力生命周期中的“決策空間”問題， 需要在項(xiàng)目正式啟動(dòng)之前制定一個(gè)基礎(chǔ)性的總體鑒定框架。 新的鑒定框架要持續(xù)更新， 并確定支持決策所需的信息， 以及如何使用使命任務(wù)工程、 系統(tǒng)工程和試驗(yàn)鑒定活動(dòng)與工具來獲取這些信息。 總體鑒定框架還要具有適應(yīng)性和可擴(kuò)展性， 能用于適應(yīng)性采辦框架的6種路徑， 同時(shí)也可以根據(jù)轉(zhuǎn)為采辦項(xiàng)目之前的科學(xué)技術(shù)、 原型設(shè)計(jì)和實(shí)驗(yàn)工作進(jìn)行剪裁（定制）。 隨著性能信息的積累和項(xiàng)目的成熟， 這種框架將實(shí)現(xiàn)對試驗(yàn)鑒定活動(dòng)的迭代和持續(xù)優(yōu)化。

按照美軍設(shè)想， 總體鑒定框架要包含對建模與仿真和其他對開展試驗(yàn)鑒定即連續(xù)體至關(guān)重要的MBSE元素進(jìn)行校核、 驗(yàn)證與確認(rèn)（VV&A）所需的信息。 應(yīng)當(dāng)確定試驗(yàn)基礎(chǔ)設(shè)施， 包括需要獲取所需評估信息的LVC資產(chǎn)， 以盡早明確對跨國防部能力組合的試驗(yàn)鑒定基礎(chǔ)設(shè)施資源的直接需求。 在基于模型的環(huán)境中開發(fā)這種鑒定框架將有利于管理跨子系統(tǒng)、 系統(tǒng)， 尤其是體系（SoS）元素的集成復(fù)雜性。 而且該框架還將支持管理跨異步開發(fā)的校核與驗(yàn)證工作。

目前， 這種方法已經(jīng)應(yīng)用到敏捷軟件開發(fā)流程， 并且與以能力和結(jié)果為中心的試驗(yàn)相結(jié)合， 為決策者提供更多有關(guān)設(shè)計(jì)開發(fā)與威脅環(huán)境是否一致的信息。 其優(yōu)勢在于支持早期投用和原型設(shè)計(jì)決策， 提高對整體系統(tǒng)彈性的理解， 并更好地了解支持能力交付所需的項(xiàng)目設(shè)計(jì)和驗(yàn)證工作的充分性和范圍。

2.3 增強(qiáng)的試驗(yàn)設(shè)計(jì)

開發(fā)涵蓋特定能力隨時(shí)間演變的一體化試驗(yàn)策略， 同時(shí)考慮高度動(dòng)態(tài)和競爭性任務(wù)環(huán)境， 是試驗(yàn)鑒定即連續(xù)體的關(guān)鍵組成部分。 因此， 以鑒定框架為基礎(chǔ)， 增強(qiáng)的試驗(yàn)設(shè)計(jì)將擴(kuò)展美軍近年來為一體化試驗(yàn)改革所做的工作， 并更好地支持任務(wù)背景下的早期性能評估。

首先， 增強(qiáng)的試驗(yàn)設(shè)計(jì)會將VV&A納入整個(gè)能力演進(jìn)或項(xiàng)目生命周期， 并向早期工程和技術(shù)驗(yàn)證試驗(yàn)提供初始數(shù)據(jù)， 為能否實(shí)現(xiàn)預(yù)期能力結(jié)果提供依據(jù)。 還將采用迭代的“設(shè)計(jì)/試驗(yàn)/驗(yàn)證”方法， 全面評估不斷演進(jìn)的“系統(tǒng)行為”， 使能力開發(fā)工作適應(yīng)不斷變化的作戰(zhàn)環(huán)境。

其次， 增強(qiáng)的試驗(yàn)設(shè)計(jì)還會包括對人-機(jī)綜合（HSI）的魯棒性評估， 重點(diǎn)是對作戰(zhàn)人員接受和使用人工智能/機(jī)器學(xué)習(xí)使能系統(tǒng)所需的可信度進(jìn)行演示驗(yàn)證。 因?yàn)閷τ诿绹鴩啦浚?無論是監(jiān)管部門、 采購部門， 還是軍方用戶， 信任是基礎(chǔ)保證。 對于作戰(zhàn)人員來說， 在這種背景下， 人-機(jī)系統(tǒng)試驗(yàn)設(shè)計(jì)尤其重要。 在實(shí)際沖突中， 使用決策幾乎必須是瞬時(shí)的， 并且依賴于在使用系統(tǒng)時(shí)對系統(tǒng)正確校準(zhǔn)的信任。 因此， 信任和團(tuán)隊(duì)合作的指標(biāo)至關(guān)重要。

最后， 增強(qiáng)的試驗(yàn)設(shè)計(jì)還會適當(dāng)結(jié)合科學(xué)試驗(yàn)與分析技術(shù)（STAT）， 以提高試驗(yàn)效率， 并有利于開展試驗(yàn)結(jié)果的嚴(yán)格評估。 貝葉斯統(tǒng)計(jì)近年來在這方面受到越來越多的關(guān)注， 就是因其提供了一種嚴(yán)謹(jǐn)?shù)臄?shù)學(xué)方法， 可以將多個(gè)來源的預(yù)測和不確定性結(jié)合起來， 并在一系列試驗(yàn)活動(dòng)中進(jìn)行更新。

3 T&EaaC內(nèi)涵分析

3.1 概念解析

試驗(yàn)鑒定即連續(xù)體是將試驗(yàn)與鑒定從一系列基本上獨(dú)立于系統(tǒng)工程活動(dòng)和使命任務(wù)工程活動(dòng)而進(jìn)行的活動(dòng)集合進(jìn)行有效綜合， 形成的一種基于連續(xù)體的新的綜合性框架。 概念強(qiáng)調(diào)試驗(yàn)鑒定不是一種“一次性”活動(dòng)， 而是需要貫穿整個(gè)系統(tǒng)全生命周期的持續(xù)過程。 從系統(tǒng)工程流程角度來看， 試驗(yàn)鑒定即連續(xù)體方法將試驗(yàn)鑒定從主要在系統(tǒng)工程“V”模型右側(cè)進(jìn)行的一組串行活動(dòng)（如圖3所示）， 轉(zhuǎn)變?yōu)閺摹癡”模型左側(cè)就開始的一系列活動(dòng)（如圖4所示）。 從實(shí)際運(yùn)行角度來看， 基于模型的環(huán)境和相關(guān)工具將使系統(tǒng)工程界能夠管理在“V”型連續(xù)體中同時(shí)開展的許多復(fù)雜活動(dòng)， 這樣使命任務(wù)工程界、 系統(tǒng)工程界和試驗(yàn)鑒定界就能夠盡早、 持續(xù)地協(xié)同工作， 并對動(dòng)態(tài)威脅環(huán)境做出快速響應(yīng)， 最終將圖3所示的傳統(tǒng)“V”型結(jié)構(gòu)變?yōu)閳D4所示的壓縮折疊后的“V”型連續(xù)體結(jié)構(gòu)。

由總體框架內(nèi)容可知， 執(zhí)行試驗(yàn)鑒定即連續(xù)體， 會將使命任務(wù)工程、 系統(tǒng)工程和試驗(yàn)鑒定整合為并行、 協(xié)同和聯(lián)合的工作。 通過協(xié)同使用使命任務(wù)分解、 相關(guān)任務(wù)條件以及由使命任務(wù)工程生成的相關(guān)效能和性能指標(biāo)， 將使系統(tǒng)工程和試驗(yàn)鑒定能夠?qū)︱?yàn)證任務(wù)能力所需的設(shè)計(jì)迭代和試驗(yàn)活動(dòng)達(dá)成共識， 這種經(jīng)過驗(yàn)證的任務(wù)能力對于在實(shí)際應(yīng)用中能夠自我學(xué)習(xí)和調(diào)整的智能裝備/系統(tǒng)尤為重要。 此外， 使命任務(wù)工程、 系統(tǒng)工程和試驗(yàn)鑒定組合方法的實(shí)施， 能夠更早、 更持續(xù)地關(guān)注任務(wù)完成而不是需求驗(yàn)證。 同時(shí)， 由于強(qiáng)調(diào)系統(tǒng)工程和試驗(yàn)鑒定之間的共同責(zé)任， 這種連續(xù)體方法能使早期系統(tǒng)工程設(shè)計(jì)權(quán)衡和分析利用作戰(zhàn)試驗(yàn)最終用于驗(yàn)證任務(wù)效能的試驗(yàn)方法和條件。

對于美國國防部而言， 一方面， 試驗(yàn)鑒定即連續(xù)體可以提供關(guān)于系統(tǒng)在威脅環(huán)境中實(shí)際性能的知情風(fēng)險(xiǎn)管理， 使各方能夠更早地了解研制/開發(fā)進(jìn)展， 并對整個(gè)采辦生命周期中的試驗(yàn)情況和關(guān)鍵節(jié)點(diǎn)充滿信心， 確保所需能力如期交付， 以支持作戰(zhàn)人員。 另一方面， 試驗(yàn)鑒定即連續(xù)體能夠有效應(yīng)對當(dāng)前國防系統(tǒng)能力復(fù)雜性帶來的風(fēng)險(xiǎn)表征和總體保證改進(jìn)需求， 這些工作將自然而然地推動(dòng)傳統(tǒng)系統(tǒng)工程和試驗(yàn)鑒定活動(dòng)的整合和交織， 提供超學(xué)科、 連續(xù)的流程， 將設(shè)計(jì)演進(jìn)與VV&A耦合， 以推動(dòng)試驗(yàn)鑒定工作的更科學(xué)發(fā)展。

3.2 能力要素分析

為支撐試驗(yàn)鑒定即連續(xù)體3大關(guān)鍵屬性的實(shí)施需求， 美國國防部結(jié)合數(shù)字工程戰(zhàn)略的5大關(guān)鍵目標(biāo)， 總結(jié)提出了實(shí)施試驗(yàn)鑒定即連續(xù)體的3大能力要素， 即魯棒的LVC試驗(yàn)、 基于模型的環(huán)境和“數(shù)字”人才隊(duì)伍。 融合這些能力要素， 可從采辦初期設(shè)計(jì)階段就提供關(guān)于系統(tǒng)性能和風(fēng)險(xiǎn)特征的及時(shí)且全面的信息， 從而實(shí)現(xiàn)裝備系統(tǒng)快速開發(fā)和部署， 同時(shí)為日益復(fù)雜的系統(tǒng)和體系提供持續(xù)支持。

3.2.1 魯棒的LVC試驗(yàn)

鑒于現(xiàn)代作戰(zhàn)系統(tǒng)的復(fù)雜性， 美軍最新的理念認(rèn)為， 試驗(yàn)鑒定必須向全面涵蓋LVC方法轉(zhuǎn)型， 其中包括基于模型的試驗(yàn)。 由于系統(tǒng)復(fù)雜性和/或?qū)沂灸芰Φ拿舾行裕?對某些系統(tǒng)進(jìn)行真實(shí)、 露天試驗(yàn)面臨著巨大的挑戰(zhàn)。 因此， 增加使用建模與仿真及其他構(gòu)造性方法對于全面了解系統(tǒng)性能至關(guān)重要。 美國國防部將會繼續(xù)發(fā)展和完善其試驗(yàn)靶場和設(shè)施能力， 以建立可涵蓋盡可能多的威脅和作戰(zhàn)環(huán)境頻譜的LVC能力組合， 而這種轉(zhuǎn)變勢必需要在數(shù)字工程環(huán)境中建立“共享”基礎(chǔ)設(shè)施， 圖5所示為整個(gè)采辦生命周期內(nèi)的各種共享能力。

這種轉(zhuǎn)變的優(yōu)勢之一是能夠進(jìn)行體系試驗(yàn)測試， 而這正是支持在全域作戰(zhàn)背景下概念評估的基本要求， 例如聯(lián)合全域指揮與控制（JADC2）評估。 由于組成體系能力的系統(tǒng)為異步開發(fā)， LVC框架將顯著提升集成度， 以支持能力驗(yàn)證， 特別是對于為實(shí)現(xiàn)共同目標(biāo)而協(xié)作的平臺的分布式或多代理AI/ML能力。 與此同時(shí)， 這些LVC能力還能用于美軍成功完成全域作戰(zhàn)所需的逼真訓(xùn)練。 不過， 美國國防部也強(qiáng)調(diào)， 日益重視LVC試驗(yàn)并不意味著會減少對真實(shí)、 露天試驗(yàn)的需求， 以評估關(guān)鍵系統(tǒng)性能， 并為建模與仿真VV&A提供支持。 通過適當(dāng)?shù)腣V&A， LVC試驗(yàn)勢必會更全面、 更準(zhǔn)確地表征系統(tǒng)面對日益復(fù)雜的對手進(jìn)行多域作戰(zhàn)時(shí)的能力。

3.2.2 基于模型的環(huán)境

試驗(yàn)鑒定即連續(xù)體概念指出， 基于模型的環(huán)境是其最關(guān)鍵的能力要素。 美國國防部認(rèn)為， 能力開發(fā)工作的復(fù)雜性， 加上增強(qiáng)的試驗(yàn)設(shè)計(jì)的復(fù)雜性， 都需要數(shù)字骨干和基于模型的方法來管理連續(xù)的試驗(yàn)鑒定活動(dòng)， 將其與并行開展的使命任務(wù)工程和系統(tǒng)工程活動(dòng)相結(jié)合， 并管理、 整理和分析所有這些活動(dòng)生成的數(shù)據(jù)。 這種基于模型的環(huán)境將整合敏捷、 可擴(kuò)展的鑒定框架， 并確保其與所有使命任務(wù)工程、 系統(tǒng)工程和試驗(yàn)鑒定活動(dòng)的一致性， 從而實(shí)現(xiàn)在試驗(yàn)鑒定采辦生命周期中提供關(guān)于建模、 仿真、 數(shù)據(jù)分析、 數(shù)據(jù)共享和使命任務(wù)工程-系統(tǒng)工程-試驗(yàn)鑒定集成的數(shù)字支持。

利用基于模型的環(huán)境， 美國國防部裝備研制將從傳統(tǒng)的“設(shè)計(jì)-建造-試驗(yàn)-修復(fù)-試驗(yàn)”（Design-Build-Test-Fix-Test）流程模式過渡到更優(yōu)的“建模-試驗(yàn)-驗(yàn)證-設(shè)計(jì)-試驗(yàn)”（Model-Test-Validate-Design-Test）流程模式， 提供關(guān)于預(yù)期任務(wù)能力的早期和持續(xù)信息， 避免采用傳統(tǒng)流程時(shí)出現(xiàn)較晚發(fā)現(xiàn)能力方面不足等問題。 目前， 美軍正在驗(yàn)證和使用這種新的擁有一條數(shù)字線索的流程， 通過高保真度“數(shù)字孿生”的潛在開發(fā)來支持使用與保障階段的項(xiàng)目， 從使命任務(wù)工程初期開始顯示系統(tǒng)性能建模的進(jìn)展。 此外， 為了更好地支持試驗(yàn)鑒定工作， 基于模型的環(huán)境還必須對系統(tǒng)將要運(yùn)行的聯(lián)合作戰(zhàn)空間進(jìn)行真實(shí)復(fù)現(xiàn)。

3.2.3 “數(shù)字”人才隊(duì)伍

美國國防部強(qiáng)調(diào)， 為了支持基于模型的環(huán)境， 還需要一支掌握“數(shù)字”能力的人才隊(duì)伍， 他們需要精通與MBSE、 基于模型的試驗(yàn)鑒定和其他基于模型的方法相關(guān)的流程和工具。 隨著《國防采辦勞動(dòng)力改進(jìn)法案》（DAWIA）認(rèn)證流程和相關(guān)職能領(lǐng)域認(rèn)證的改革， 美軍數(shù)字人才隊(duì)伍建設(shè)轉(zhuǎn)型已經(jīng)初步開始， 美國國防部需要付出更多的努力， 才能在國防部內(nèi)獲取并發(fā)展有關(guān)使用基于模型的方法并行開展使命任務(wù)工程、 系統(tǒng)工程、 試驗(yàn)鑒定連續(xù)體活動(dòng)所需的技術(shù)和管理技能。 此外， 美國國防部指出， 當(dāng)前的轉(zhuǎn)型工作并沒有推動(dòng)更廣泛的系統(tǒng)工程領(lǐng)域內(nèi)所需的全面集成， 來確保試驗(yàn)鑒定成為系統(tǒng)工程V&V工作的重要組成部分。 而且， 系統(tǒng)工程“V”模型的“折疊”并不否定良好的普通系統(tǒng)工程實(shí)踐， 重大挑戰(zhàn)則在于如何迭代管理這些實(shí)踐， 以確保與這種基于模型的新的系統(tǒng)工程“V”模型環(huán)境的動(dòng)態(tài)、 關(guān)聯(lián)性質(zhì)保持一致。

4 研究啟示

試驗(yàn)鑒定作為武器裝備能力交付的重要環(huán)節(jié)， 在美國國防部推進(jìn)數(shù)字工程的過程中， 受到格外重視。 在裝備研制能力快速發(fā)展的背景下， 美軍新提出的試驗(yàn)鑒定即連續(xù)體概念對于當(dāng)前裝備試驗(yàn)鑒定的數(shù)字化轉(zhuǎn)型具有一定啟示。

4.1 重視工程理念融合， 推動(dòng)試驗(yàn)鑒定數(shù)字化變革

美國國防部針對當(dāng)前武器裝備復(fù)雜性特點(diǎn)， 開展的此系列舉措， 旨在推動(dòng)試驗(yàn)鑒定活動(dòng)與傳統(tǒng)系統(tǒng)工程的整合和交織， 期望提供超學(xué)科、 連續(xù)的流程， 將設(shè)計(jì)改進(jìn)與VV&A耦合。 與此同時(shí)， 試驗(yàn)鑒定即連續(xù)體概念所強(qiáng)調(diào)的并行、 協(xié)同和聯(lián)合模式， 是“左移”策略的進(jìn)一步深化， 能夠盡早提供相關(guān)任務(wù)場景中系統(tǒng)試驗(yàn)的重要反饋信息， 滿足當(dāng)前AI/自主等魯棒系統(tǒng)設(shè)計(jì)開發(fā)和持續(xù)改進(jìn)的需求。 應(yīng)當(dāng)借鑒連續(xù)體這種模式， 加快試驗(yàn)鑒定數(shù)字化轉(zhuǎn)型進(jìn)程， 增強(qiáng)裝備研制風(fēng)險(xiǎn)表征， 促進(jìn)試驗(yàn)鑒定前伸后延， 完善生命周期數(shù)據(jù)管理體系， 從而保證裝備系統(tǒng)整體交付能力目標(biāo)。

4.2 重視基于模型的方法， 提升AI/ML等新興技術(shù)的試驗(yàn)鑒定效能

早在F-22和F-35等裝備研制期間， 美軍就已經(jīng)進(jìn)行了大量建模與仿真研究實(shí)踐。 近年來， 美國國防部在數(shù)字工程推進(jìn)和數(shù)字化轉(zhuǎn)型實(shí)施過程中， 持續(xù)深化試驗(yàn)鑒定數(shù)實(shí)結(jié)合的總體思路， 不斷強(qiáng)化像作戰(zhàn)一樣試驗(yàn)的理念， 推動(dòng)了LVC等基于模型的技術(shù)發(fā)展。 隨著未來裝備（如六代機(jī)、 蜂群）快速發(fā)展， 人工智能/自主技術(shù)已成為核心要素， 使得軟件能力在武器裝備研制中的比重越來越大， 美軍越發(fā)重視軟件能力的試驗(yàn)鑒定。 據(jù)悉， 美軍軟件工程領(lǐng)域正在通過“軟件采辦路徑”領(lǐng)導(dǎo)實(shí)施一種更具迭代性的基于模型的軟件開發(fā)設(shè)計(jì)/測試方法， 以實(shí)現(xiàn)在試驗(yàn)鑒定采辦生命周期內(nèi)， 提供連續(xù)體需要的關(guān)于建模、 仿真、 數(shù)據(jù)分析、 數(shù)據(jù)共享和使命任務(wù)工程-系統(tǒng)工程-試驗(yàn)鑒定集成的數(shù)字支持。 應(yīng)當(dāng)借鑒連續(xù)體這種做法， 加強(qiáng)基于模型的方法的研究與應(yīng)用， 提升AI/ML賦能的武器系統(tǒng)在跨所有作戰(zhàn)域的綜合環(huán)境中、 在專注于體系構(gòu)成和更大指數(shù)級攻擊面的任務(wù)線程中的試驗(yàn)鑒定效能， 確保裝備系統(tǒng)管用、 好用。

4.3 重視結(jié)合裝備研制實(shí)際， 促進(jìn)試驗(yàn)鑒定科學(xué)發(fā)展

隨著裝備系統(tǒng)復(fù)雜度和作戰(zhàn)體系化要求的不斷提升， 2022年6月， 美國國防部作戰(zhàn)試驗(yàn)鑒定局發(fā)布的《2022財(cái)年作戰(zhàn)試驗(yàn)鑒定戰(zhàn)略更新》， 為試驗(yàn)鑒定基礎(chǔ)設(shè)施、 工具、 流程和人才隊(duì)伍的變革制定了路線。 同時(shí)， 美國國防部數(shù)字工程工作組專門成立基礎(chǔ)設(shè)施團(tuán)隊(duì)來解決基于數(shù)字工程的試驗(yàn)鑒定自動(dòng)化問題， 美國空軍也在持續(xù)推進(jìn)試驗(yàn)策略與開發(fā)流程改進(jìn)。 試驗(yàn)鑒定即連續(xù)體這種系統(tǒng)化方法便是美軍探索之一。 此外， 美國國防部近年來還在推動(dòng)MBSE、 貝葉斯方法、 超學(xué)科技術(shù)方法在試驗(yàn)鑒定中的應(yīng)用， 并加強(qiáng)了試驗(yàn)鑒定人員對于基于模型的試驗(yàn)鑒定等科學(xué)方法的培訓(xùn)學(xué)習(xí)。 在裝備研制邁向并駕齊驅(qū)， 甚至領(lǐng)先超越的過程中， 應(yīng)當(dāng)借鑒美軍連續(xù)體發(fā)展思路， 秉持系統(tǒng)科學(xué)的發(fā)展理念， 結(jié)合數(shù)字化、 體系化、 智能化裝備發(fā)展需要， 加強(qiáng)相關(guān)試驗(yàn)鑒定能力提升方面的基礎(chǔ)研究， 形成一套標(biāo)準(zhǔn)化、 系統(tǒng)化、 科學(xué)化的試驗(yàn)鑒定理論和方法， 從而促進(jìn)試驗(yàn)鑒定科學(xué)可持續(xù)發(fā)展。

5 結(jié) 束 語

隨著數(shù)字工程戰(zhàn)略的持續(xù)推進(jìn)， 多域作戰(zhàn)概念的日趨成熟， 人工智能/機(jī)器學(xué)習(xí)、 自主等新興技術(shù)的快速發(fā)展， 美國國防部認(rèn)為必須對整體采辦模式進(jìn)行變革轉(zhuǎn)型， 要求各軍種結(jié)合數(shù)字工程理念持續(xù)開展試驗(yàn)策略與開發(fā)流程優(yōu)化。 美軍后續(xù)可能將緊跟分布式人工智能和數(shù)字工程技術(shù)發(fā)展步伐， 繼續(xù)推動(dòng)該概念的驗(yàn)證、 完善和深入應(yīng)用等工作， 完善試驗(yàn)環(huán)境的數(shù)字化和LVC能力， 增強(qiáng)鑒定框架的靈活性和擴(kuò)展性， 提升復(fù)雜人工智能系統(tǒng)和多域作戰(zhàn)的試驗(yàn)鑒定能力， 以期達(dá)到試驗(yàn)鑒定改革效果。

參考文獻(xiàn)：

［1］ Collins C， Senechal K. Test and Evaluation as a Continuum［J］. The ITEA Journal， 2023， 44（1）： 4-1-4-16.

［2］ Greer E R. The Integrated T&E Continuum， the Key to Acquisition Success［J］. The ITEA Journal， 2010， 31（4）： 443-446.

［3］ Freeman L， Beling P， Esser K， et al. Positioning Test and Evaluation for the Digital Paradigm［J］. The ITEA Journal， 2023， 44（2）： 7-1-7-11.

［4］ Office of the Deputy Assistant Secretary of Defense for Systems Engineering. DoD Digital Engineering Strategy［R］. Washington： United States Department of Defense， 2018.

［5］ 崔艷林， 王巍巍， 王樂. 美國數(shù)字工程戰(zhàn)略實(shí)施途徑［J］. 航空動(dòng)力， 2021 （4）： 84-86.

Cui Yanlin， Wang Weiwei， Wang Le. US Digital Engineering Implementation Strategy［J］. Aerospace Power， 2021（4）： 84-86. （in Chinese）

［6］ 衛(wèi)旭芳， 劉彬. 美軍數(shù)字工程建設(shè)發(fā)展研究及啟示［J］. 航空兵器， 2023， 30（3）： 56-66.

Wei Xufang， Liu Bin. Research on the Development of US Military Digital Engineering and Its Enlightenment［J］. Aero Weaponry， 2023， 30（3）： 56-66.（in Chinese）

［7］ Office of the Under Secretary of Defense for Research and Engineering， Office of the Director， Operational Test and Evaluation. DoD Instruction 5000.89， Test and Evaluation［R］. Washington： United States Department of Defense， 2020.

［8］ Cortes L A， Wong M K， Cortes-Morales A， et al. Advance M&S in Acquisition T&E ［R］. McLean： The MITRE Corporation， 2021.

［9］ The Office of the Assistant Secretary of the Air Force. Digital Building Code for Digital Engineering［R］. Washington： Department of the Air Force， 2021.

［10］ Bjorkman E， Grigaliunas J. Test and Evaluation-Where the Rubber Meets the Road in Digital Engineering［J］. Defense Acquisition Magazine， 2021， 50（6）： 8-14.

［11］ DOT&E. 2021 DOT&E Annual Report［R］. Washington： United States Department of Defense， 2022.

［12］ Hobson S， Collins C. Transforming T&E to Adequately Assess Warfighting Capability in a Multi-Domain Operational Environment［C］∥1st T&E in a Multi-Domain Operational Environment Workshop， 2021.

［13］ DOT&E. DOT&E Strategy Update 2022［R］. Washington： United States Department of Defense， 2022.

［14］ Hobson S， Lowe P， Thomas N， et al. Proven Warfighting Capabili-ties Delivered at the Speed of Need［R］. Washington： United States Department of Defense， 2023.

［15］ Collins C. Multi-Domain Operations-Initiatives to Enable T&E Evolution［C］∥ITEA’s 2nd Annual Multi-Domain Operations Workshop， 2022.

Research on US Military Test and Evaluation as a Continuum

Yang Tao， Zhang Yi*， Liang Baohua， Li Guole

（Chinese Flight Test Establishment， Xi’an 710089， China）

Abstract： The reform of test and evaluation is a critical component of the US defense acquisition system reform and the digital transformation of the US military. Facing the challenges of test and evaluation brought by the development of emerging technologies such as artificial intelligence and autonomy， as well as the systematic operational requirements like multi-domain warfare and all-domain warfare， to the delivery of weapon equipment capabilities， the US Department of Defense is actively promoting digital transformation in the field of test and evaluation. One of the crucial measures is to put forward the concept of test and evaluation as a continuum， aiming to continuously optimize test strategies and evaluation processes with the help of digital engineering concepts， and further enhance the efficiency and qua-lity of acquiring weapon equipment. This article briefly outlines the development of test and evaluation as a continuum， analyzes its framework content and conceptual implications， discusses the specific capability elements required for implementation， and provides insights into the digital transformation of test and evaluation for weapon equipment.

Key words： test and evaluation as a continuum； digital transformation； digital engineering； mission engineering； systems engineering