為了加速美國(guó)國(guó)防部采用人工智能技術(shù)的進(jìn)程，美國(guó)聯(lián)合人工智能中心（JAIC）正在創(chuàng)建一個(gè)聯(lián)合通用基礎(chǔ)（JCF）平臺(tái)。為此，JAIC/國(guó)防信息系統(tǒng)局（DISA）/國(guó)防信息技術(shù)合同組織（DITCO）于2020年4月13日發(fā)布了信息請(qǐng)求（RFI），要求開(kāi)發(fā)AI測(cè)評(píng)軟件、創(chuàng)建AI測(cè)評(píng)流程和最佳實(shí)踐，由供應(yīng)商提供AI測(cè)評(píng)服務(wù)。

JAIC由美國(guó)國(guó)防部首席信息官（CIO）主管，該中心旨在加速整個(gè)國(guó)防部采用人工智能（AI）技術(shù)的進(jìn)程。各軍兵種對(duì)AI技術(shù)的需求不斷增長(zhǎng)，以求增強(qiáng)作戰(zhàn)人員執(zhí)行重復(fù)和/或危險(xiǎn)任務(wù)的能力。AI有潛力為作戰(zhàn)人員提供及時(shí)和關(guān)鍵的支持，提高作戰(zhàn)節(jié)奏，從而在戰(zhàn)場(chǎng)上提供優(yōu)勢(shì)。JAIC已經(jīng)建立了幾個(gè)關(guān)鍵的任務(wù)倡議（MI）（如圖1所示），其中，AI可以增強(qiáng)跨軍種作戰(zhàn)。

為了促進(jìn)AI技術(shù)的采用，JAIC正在創(chuàng)建一個(gè)聯(lián)合通用基礎(chǔ)（JCF）平臺(tái)。如圖2所示，JCF將發(fā)現(xiàn)、開(kāi)發(fā)和測(cè)試AI問(wèn)題的解決方案，并作為任務(wù)倡議開(kāi)發(fā)的AI技術(shù)的主要平臺(tái)。

為了確保每個(gè)任務(wù)倡議都能生產(chǎn)出安全有效的產(chǎn)品，JAIC設(shè)有一個(gè)測(cè)評(píng)（T&E）辦公室，專(zhuān)門(mén)負(fù)責(zé)在JCF上提供測(cè)試服務(wù)。利用算法測(cè)試、系統(tǒng)測(cè)試和操作測(cè)試，該辦公室負(fù)責(zé)評(píng)估所有JAIC產(chǎn)品，并獨(dú)立提供AI性能的分析。

JAIC是國(guó)防部的AI卓越中心。JAIC測(cè)評(píng)團(tuán)隊(duì)負(fù)責(zé)開(kāi)發(fā)國(guó)防部范圍內(nèi)的AI測(cè)評(píng)流程、工具和標(biāo)準(zhǔn)。為了實(shí)現(xiàn)這一目標(biāo)，該團(tuán)隊(duì)將在JCF上開(kāi)發(fā)和托管AI測(cè)試設(shè)備，以供更廣泛的國(guó)防部機(jī)構(gòu)使用。此外，該團(tuán)隊(duì)還需要成為AI測(cè)評(píng)主題專(zhuān)家的集中聯(lián)絡(luò)點(diǎn)。

2020年4月13日，JAIC測(cè)評(píng)辦公室發(fā)布信息請(qǐng)求，包括開(kāi)發(fā)AI測(cè)評(píng)軟件、創(chuàng)建AI測(cè)評(píng)流程和最佳實(shí)踐，由供應(yīng)商提供AI測(cè)評(píng)服務(wù)。該團(tuán)隊(duì)的主要需求如下：

測(cè)試技術(shù)及工具

JAIC 測(cè)評(píng)辦公室尋求為各種AI應(yīng)用獲取測(cè)試技術(shù)和工具。按照預(yù)期，AI測(cè)評(píng)聚焦于開(kāi)發(fā)測(cè)評(píng)能力支持國(guó)防部的全頻譜新興AI技術(shù)，包括機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)。其重點(diǎn)包括：

（1）使用語(yǔ)音自動(dòng)轉(zhuǎn)化為文本的對(duì)話(huà)界面應(yīng)用程序。

（2）為國(guó)防部應(yīng)用和系統(tǒng)提供語(yǔ)音產(chǎn)品和服務(wù)。

（3）圖像分析，測(cè)試基于深度學(xué)習(xí)的視覺(jué)搜索和圖像分類(lèi)器。

（4）支持自然語(yǔ)言處理（NLP）的產(chǎn)品和服務(wù)。

（5）通過(guò)機(jī)器增強(qiáng)人類(lèi)的能力，包括人機(jī)界面和衡量作戰(zhàn)人員認(rèn)知和身體負(fù)荷的改進(jìn)方法，具體包括增強(qiáng)現(xiàn)實(shí)（AR）和虛擬現(xiàn)實(shí)（VR）測(cè)試服務(wù)。

（6）自主系統(tǒng)。

測(cè)評(píng)服務(wù)

JAIC測(cè)評(píng)團(tuán)隊(duì)正在尋求政府、學(xué)術(shù)界和工業(yè)界組織的服務(wù)，以協(xié)助任務(wù)倡議或其他國(guó)防部工作人員進(jìn)行技術(shù)測(cè)評(píng)，具體需求如下：

（1）數(shù)據(jù)集開(kāi)發(fā)/管理：每個(gè)任務(wù)倡議或國(guó)防部AI項(xiàng)目都有獨(dú)特的數(shù)據(jù)，針對(duì)這些數(shù)據(jù)，必須以一定的方式進(jìn)行獲取和管理，以便能夠被現(xiàn)代AI軟件系統(tǒng)使用。這些工作包括但不限于數(shù)據(jù)質(zhì)量評(píng)估、圖像注釋和數(shù)據(jù)覆蓋分析。

（2）測(cè)試工具開(kāi)發(fā)：創(chuàng)建自動(dòng)的、封裝的、支持云的測(cè)試工具，以幫助將數(shù)據(jù)自動(dòng)導(dǎo)入到封裝的AI模型中，并匯總結(jié)果。

（3）模型輸出分析：需要專(zhuān)業(yè)分析知識(shí)/軟件來(lái)評(píng)估由任務(wù)倡議開(kāi)發(fā)的AI模型結(jié)果質(zhì)量。這方面的工作包括開(kāi)發(fā)封裝的、基于云的分析軟件，以及創(chuàng)建特定場(chǎng)景、與操作相關(guān)的性能指標(biāo)。

（4）測(cè)試計(jì)劃、文檔和報(bào)告：測(cè)試專(zhuān)家為AI算法創(chuàng)建測(cè)試生命周期（算法測(cè)試、系統(tǒng)測(cè)試和操作測(cè)試）所需的文檔。包括但不限于，創(chuàng)建測(cè)評(píng)主計(jì)劃（TEMPS）、測(cè)試計(jì)劃，創(chuàng)建測(cè)試報(bào)告，記錄結(jié)果，以及管理測(cè)試計(jì)劃。

（5）測(cè)試服務(wù)：對(duì)AI產(chǎn)品進(jìn)行測(cè)評(píng)的服務(wù)和專(zhuān)業(yè)知識(shí)，包括但不限于，在算法測(cè)試、系統(tǒng)測(cè)試、開(kāi)發(fā)測(cè)試和操作測(cè)試等所有測(cè)評(píng)領(lǐng)域?qū)I算法和/或AI使能系統(tǒng)進(jìn)行測(cè)試。

來(lái)源：《戰(zhàn)略前沿技術(shù)》