来源 | 空天防务观察
智库 | 云脑智库(CloudBrain-TT)
云圈 | 进“云脑智库微信群”,请加微信:15881101905,备注您的研究方向
声明 | 本号聚焦相关知识分享，内容观点不代表本号立场，可追溯内容均注明来源，若存在版权等问题，请联系(15881101905，微信同号)删除，谢谢。
2022年1月27日，美国防部作战试验鉴定局公布了《作战试验鉴定局2021财年报告》（公开版）。从2021财年开始，作战试验鉴定局将发公开版和保密版2个版本年度报告。此公开版年度报告也是新任作战试验鉴定局局长尼古拉斯·H·格廷（Nickolas H.Guertin）发布的第一份年度报告。新局长在报告开篇的前言中传达了一种推动作战试验与鉴定转型（T&E）转型的紧迫感：“过去（渐进式）发展的速度已经不足以满足国家安全的要求，尤其是作战试验与鉴定。相反，为了继续履行我们对作战人员的义务，我们需要一场试验与鉴定革命。” 
《作战试验鉴定局2021财年报告》公开版的封面（美国防部图片）2021财年年度报告介绍了作战试验鉴定局（DOT&E）2021财年完成的主要工作，分析了DOT&E当前面临的问题和挑战，并揭示了其应对挑战、实施作战试验与鉴定转型的具体举措，即在未来5年围绕5个重点领域实施的《科技战略规划》，还介绍了为推进试验与鉴定转型，DOT&E2021年所做的内部结构重组。在2021财年，作战试验鉴定局（DOT&E）为处在采办周期的不同阶段的237个采办项目提供了作战试验和实弹试验与鉴定监督。具体而言，DOT&E审查并批准了26份试验与鉴定主计划（TEMP），其中的9份包括实弹试验与鉴定（LFT&E）策略；2份独立的LFT&E策略；以及56份单独的试验计划。DOT&E根据各军种提供下列内容的情况评估了其试验策略和计划的充分性：1）支持可靠评估作战效能和作战适用性的数据，2）作战空间和威胁的覆盖范围，3）充分使用建模与仿真（M&S），4）完整的网络安全和实弹评估，包括演示针对任务相关威胁的系统生存能力和杀伤力，5）生产代表性试验物品，6）作战真实性，以及7）支持试验执行所需资金的充足性。DOT&E发布了26份报告，包括23份提交国会和国防部长的报告，以及一份关于弹道导弹防御系统的机密年度报告。除了试验充分性评估外，DOT&E报告还总结了主任对预期作战条件下国防部武器系统的作战效能、杀伤力、适用性和生存能力的独立评估。在尚未完成作战和实弹试验与鉴定的情况下，DOT&E在部署或下一次采办决策审查之前，提供临时评估，并在即将进行的作战和实弹试验中确定实现所需作战性能的任何风险。DOT&E报告总结了旨在修复已识别缺陷并改善武器系统在预期作战场景和条件下的作战性能的实用建议，以最大限度地降低作战人员的风险，并最大限度地提高冲突中任务成功的概率。在2021财年，DOT&E发布了其首个科技战略规划，重点解决以下5方面T&E挑战：1）软件和网络T&E，2）下一代T&E能力，3）所需的一体化T&E寿命周期，4）数字转型，以及5）人才队伍专业知识和合作伙伴关系。DOT&E计划通过这些战略举措，为即将公布的试验与鉴定政策和指南提供信息，并使试验与鉴定变得灵活而可靠，能够充分支持采办改革，同时应对新兴的技术需求和日益复杂和动态的多域作战环境。2021年3月，根据FY21国防部拨款法案，DOT＆E公布了军队卫生系统（MHS）GENES的后续适应性评估。2021年4月，DOT＆E在参议院军事委员会预备小组委员会上就国防部采办的执行情况作证，而在2021年7月，DOT＆E就国防部固定翼战术和训练飞机项目的2022财年预算申请在众议院军事委员会的战术空军和陆军小组委员会上作证。2021年5月，作为对参议院拨款委员会国防部2021拨款议案的解释性声明的回应，DOT＆E公布了针对批准的中间层采办（804）和加速采办计划报告，军种计划的试验策略的适当性证明。最后，表1提供了针对2020财年和2021财年国防授权法案（NDAA）已完成和正在进行的几项活动的状态。
《作战试验鉴定局2021财年报告》公开版中按国防授权法提供的一些概要完成情况（美国防部图片）在2021财年，DOT&E继续强调并纠正拟议试验计划不充分的情况。根据DOT&E在2021财年审查的试验计划，常见缺陷与1）数据收集计划、2）M&S保真度或验证缺陷、3）试验资源限制以及对作战环境和威胁的覆盖不足有关，包括网络评估的测试范围和威胁现实性不足。为了解决这些试验缺陷，DOT&E与项目利益相关方合作，提高项目的试验充分性。此外，由于靶场基础设施的挑战导致了一些试验不足，DOT&E委托美国国家科学院、工程院和医学院，对国防部试验靶场和相关基础设施的健康和完好情况进行研究，以备未来作战试验和实弹试验。DOT&E还成立了一个T&E资源和基础设施工作组，负责与USD（R&E）和其他国防部利益相关方协调，编目和解决作战试验和LFT&E资源和基础设施不足的问题。2021年9月，美国国家科学院、工程和医学院公布了他们的报告，提出以下五个主要建议：1）开发“未来的靶场”来测试联合全域作战环境中的完整杀伤链；2）重组靶场能力需求确定流程，以实现靶场的持续现代化和持续保障；3）为在整个武器系统研制和试验寿命周期内无处不在的M&S独立创立新的靶场操作系统；4）为未来的作战试验和无缝靶场复杂组织体的互操作性创建“TestDevOps”数字基础设施；5）为响应性、有效性和灵活性重塑靶场复杂组织体投资模型。DOT&E正在评估美国国家科学院的建议，并将与国防部利益相关方合作，在资源允许的情况下，酌情解决每一项建议。与此同时，通过新成立的T&E资源和基础设施工作组，并与USD（R&E）的试验资源管理中心（TRMC）协调，DOT&E启动了在海军海上和陆地靶场进行更具代表性的电子战试验的开发，这是一种能够模拟一系列声学特征的威胁鱼雷，从无人机系统获取用于数据收集的小型仪器的威胁，并继续开发下一代空中目标。国防部对其采办政策进行了重大修改，以支持以相关速度提供性能的国防战略目标。为了支持更快地提供经验证的作战能力，2020年11月，DOT&E、美国防部研究与工程副部长（R&E）、采办与保障副部长（A&S）和军种试验与鉴定主管一起，支持发布了国防部指示5000.89，该指示为新的采办程序提供试验鉴定程序，包括应急能力采办、中间层采办、，重大能力采办、软件采办和国防业务系统采办。目前正在做出重大努力，为T&E界提供所需的工具、架构和方法，以优化集成测试、数字工程工具的好处，并在不损害作战性能评估可信度的情况下实现敏捷试验与鉴定。此类改进将记录在DOT&E和USD（R&E）正在开发的复杂组织题试验鉴定指南中，以向国防部采办和T&E团体提供他们所需的可定制指导，以确保每个采办程序的充分开发、运行和实弹试验与鉴定。在此期间，在2021财年，DOT&E评估了86个项目的试验策略的适当性，这些项目由军种采购主管批准，以寻求加速采购授权。DOT&E审查了47项试验策略（其余35项未提供审查），并酌情认证了其中33项，同时观察到以下情况：1）试验策略通常缺乏明确的资源来规划和执行作战试验，或培训操作员、维护人员和网络防御人员，2）试验策略缺乏证明作战有效性、适用性、生存能力和杀伤力所需的严格性，3）采用具有快速试验-修复-试验周期的一体化试验方法，以实现敏捷性，已经开始给军种作战试验机构和研制试验组织带来压力，目前没有资源、人员或培训来满足此类方法所需的持续工作和报告水平。鉴于美国武器系统的日益复杂和潜在对手的能力快速提升，再加上作战环境的日益复杂，需继续强调转变试验鉴定工作理念的重要性和必要性。为支持国防部在多域作战环境中作战和称霸的能力，作战能力正在持续发展演变， 试验鉴定团体将需要创新的复杂组织体级方法，以促成逼真的试验，包括真实试验和虚拟试验。为了支持新的试验鉴定理念，DOT&E强调需要在以下方面进行投资：1）自动化试验和可视化试验空间和任务效果的工具，2）数据收集、存储和分析改进，3）改进虚拟环境和M&S工具，这些工具可靠且经实时数据验证，4）优化一体化试验与鉴定的工具和方法，如顺序试验和不确定性量化，以及5）应对自主和人工智能（AI）使能的系统、高超声速武器、定向能武器、空间系统和其他新兴的试验鉴定挑战（难题）的试验测试工具和方法。为了充分专注于实现这些和类似的目标，DOT&E成立了一个新的战略倡议、政策和新兴技术机构（SIPET）。这一领域值得注意的FY21工作分为五大方面：在2021财年，DOT&E成立了一个由来自整个组织的软件和网络空间专家组成的团队，协调内部和外部工作，以改进网络T&E和国防部网络战略计划。具体目标包括：1）改进网络威胁表达，2）优化以任务为中心的网络评估，3）提高网络专业知识的可用性和集成度，4）提高对网络空间中的防御性对抗的网络OT&E的理解和纳入，5）增强国防部网络空间攻击和使能能力的OT&E，6）强调项目寿命周期所有阶段的漏洞管理。改善网络T&E数据的标准化和评估供应链影响的举措也在进行中。随着人工智能和自主性逐渐成为国防部任务空间的一个组成部分，DOT&E正与联合人工智能中心和国防部研究与工程副部长（USD（R&E））合作，为此类系统制定T&E路线图。虽然工业界的方法、最佳实践和技术信息丰富，但在评估国防部在性能降级的复杂环境中运作的能力，并为国家安全关键的战略和战术决策提供信息时，这些方法、最佳实践和技术并不能解决一系列挑战和需求。该路线图旨在确保随着基于人工智能的系统和技术的成熟，更大的试验与鉴定团体正在制定试验策略、实践、方法、基础设施、数据工具、人员队伍和其他试验与鉴定需求。DoDI 5000.89政策强调了一体化试验的重要性，通过规划为多个目标提供数据的试验活动，提高了整个T&E项目的效率。一体化试验为采办项目提供了在研制试验中尽早发现问题、提高生产就绪度以及通过在整个采办周期中利用更具作战相关性的数据缩短采办周期的机会。具体而言，DOT&E与USD（R&E）合作，加快实施综合决策支持关键框架，以确保基于数据的采办决策。该指南将为项目利益相关方提供一种更结构化和标准化的方法，使作战评估和技术评估的决策点与为决策提供信息所必需的事件保持一致。使用该框架，可以通过采用试验设计方法（如顺序方法）在任务背景中与最终使用用户更早地规划试验。采用这些方法进行试验规划、执行和评估，各项试验事件基于彼此建立，并根据以往的试验结果进行细化，避免重复，同时又不影响评估的可信度。在与USD（R&E）下属的试验资源管理和中心（TRMC）的合作下，DOT&E领导了五个演示的选择和执行，展示了2020财年国防授权法（ NDAA）第231节研究中“实现T&E自动化的数字工程能力”中所要求的数字工程范例的应用。演示结果仍处于初步阶段，表明了质量、周期、可预测性和成本等属性的改进。这项工作催生了一系列相关的数字转型举措，包括：2022财年NDAA第217节“用于生存力和杀伤力试验的数字技术的开发和实施”，以及敏捷验证、验证和认证（VV&a）举措，以及对数字双胞胎（数字孪生）的评估。另外，在2021年9月，DoT＆E启动了一个改进T＆E数据管理的内部倡议，使手工搜索和汇总来自各种工件的数据元素的过程自动化。初步的概念验证将展示接收各种非结构化文档并自动将其处理为可读的机器学习格式的能力，使T&E团体能够快速、轻松地识别所需信息，为需求、用户、装备开发方和采办决策提供信息。在2021年8月，DOT＆E发起了一个技术人员队伍评估，以更好地理解和开发T＆E人员队伍随着国防部武器系统的发展，执行其任务所需的知识、技能和能力。这一努力对于确保组织的结构、组织和姿态达到最佳状态以取得成功至关重要。在接下来的几个月里，DOT&E将制定一份技术技能和人力报告和战略人员队伍计划，详细说明DOT&E遇到的挑战、机遇和可采取的措施，以使T&E人员队伍实现最佳定位，以满足今天和未来的任务。我们最大的资产是我们的人员队伍，这项评估将帮助DOT&E为其员工提供他们在T&E演进和革命中保持领先所需的支持和资源。除了人员队伍评估，DOT&E还与各军种部门的网络试验团队合作，完成了软件和网络卓越试验网（Cyber Network of Excellence for Testing，SCyNET）探路活动的第一年。这些探路举措包括确定需求、定义业务案例，以及记录经验教训，以基于大学的服务提供者的形式提供长期能力，以解决T&E战略差距。国防部操作员和大学研究人员之间的这种实时联系既解决了问题，又为未来的工作和协作在国防部与大学之间建立了关系。试验与鉴定对于演示武器系统性能至关重要，并为国防部任务规划方、指挥官、操作员和维修人员提供对真实武器系统能力和数据的理解，以充分规划和执行其作战任务。这方面的例子可以在本报告的弹药有效性联合技术协调小组、联合试验和评估以及网络评估项目部分找到。具体而言，DOT&E网络相关活动有助于国防部确定网络对任务性能的影响，识别网络和系统漏洞，评估作战概念和程序，增强网络团队能力，更新指南和方法，促进网络攻击能力的作战评估，并向国防部通报有关项目和技术的网络考虑因素，例如转向基于云计算的商业应用。DOT&E网络安全评估发现了重要的漏洞，如果得到纠正，将提高国防部抵御网络攻击的能力。总体而言，T&E确定了可以而且应该在武器系统部署或下一次采办决策之前解决的作战性能缺陷。这种识别允许在采购大量系统之前采取纠正措施，并避免对系统进行昂贵的改造。一个例子包括CVN 78的全船冲击试验，该试验确定了几个CVN 78设计缺陷，如果解决这些缺陷，可以提高CVN 78在水下鱼雷或水雷攻击下的生存能力。下面的性能趋势部分提供了有关T&E价值的更多详细信息。与前几年的DOT&E报告一致，在2021财年，DOT&E报告62%的项目（21个项目中的13个）进行了充分的作战试验，如图1所示，在被评估为不充分或部分充分的8个项目中，有5个报告了网络试验不足的项目是因覆盖范围有限；有关任务影响的数据收集不足；防止、减轻和从攻击中恢复的能力不足；以及缺乏足够的资金。3个项目报告了M&S保真度或模型验证方面的缺陷。有2个项目报告称，没有考虑最具挑战性的威胁，或没有正确描述作战威胁。其他试验充分性问题包括：由承包商而非由典型作战人员提供保障、未能收集或交付所有要求的数据，以及系统开发延迟，导致试验不完整。 
除了试验充分性问题，DOT&E报告还确定了其他试验执行限制。常见的试验限制包括：数据收集不足、试验靶场环境限制（妨碍了稳健的作战评估）、由于过度依赖外场支持代表而导致的不真实维护、理论培训资源有限（妨碍了新系统能力的充分利用）以及作战试验仅限于一种环境，或不涵盖所有必需的威胁，如电子攻击。COVID-2019冠状病毒疾病阻碍了8个项目的所有T＆E利益相关方的全面参与，影响了数据收集和支持资产和其他资源的可用性。DOT&E已批准的试验计划也提供了对已知试验限制的洞察。如图2所示，生存力是最常见的一类试验计划限制，其次是影响DOT&E效能和适用性评估的限制。大多数（93%）的生存力限制是由于网络安全造成的。在2021财年的56项试验计划中，有24项只关注网络安全，除两项外，其他所有试验计划都确定了网络安全限制。常见的网络试验限制包括：网络红色团队缺乏先进的网络攻击能力，由于担心安全或现场操作网络受损，对所有攻击向量的覆盖不足，需要更强大的供应链评估，缺少数据连接电缆等试验资源，红队没有足够的时间来调查所有可能的威胁向量，并且缺乏可用的完整系统。其他常见的试验限制包括M&S或模型VV&A缺陷，这些缺陷有时是由于缺乏可用的完整系统造成的。
图2 DOT&E2021财年试验计划中的局限性（按领域）图3至图5显示了2016财年以来DOT&E对作战效能、作战适用性和生存能力的评估结果。这些数字不包括DOT&E未进行评估的报告，因为试验事件在采办周期中太早，范围狭窄，或存在妨碍评估作战性能的限制。在21财年，DOT&E评估的项目中有67%的项目无疑是作战有效的。系统不能有效作战的原因包括：系统、软件或集成缺陷；影响操作员绩效或机组效率的培训限制；以及在特定环境、任务区域或针对特定威胁时的缺陷。进行早期用户试验的项目，包括里程碑C之前的作战评估，能够及早发现作战问题，提供了更大的机会来影响设计，并在部署前进行纠正。例如，一体化视觉增强系统（IVAS）项目进行了几次士兵接触点活动，以便在基于任务的作战环境中试验系统原型，并从军事用户那里获得早期反馈，以支持设计改进。相比之下，DOT&E观察到了不进行早期作战评估的后果。F-35项目在完成作战试验（OT）和分析之前，生产并部署了飞机、进行了航空电子设备变更和软件发布。因此，作战试验和用户团体通过试验和外场实际使用，继续发现了F-35的重大问题。 
在21财年，DOT&E评估了大约一半的项目在没有任何警告的情况下适合作战，这一趋势自2016财年以来一直相对稳定。适用性缺陷分布在人类系统集成（HSI）、可靠性、可用性和安全性方面。最值得注意的是，80%的评估人为因素的项目报告了HSI缺陷。HSI退化的最常见原因是由于文件不完整或不准确、可用性差和工作量大而导致的培训不足。操作员和维护人员经常报告说，他们将受益于额外的实践培训。50%的报告（包括可靠性评估）发现，该系统足够可靠，可以毫无疑问地支持任务。可靠性不足是由硬件和软件缺陷造成的。更大比例的报告发现系统无疑是可维护的（71%）和可用的（77%）。
在21财年，DOT&E评估了9%的项目在没有任何警告的情况下可以生存，这一比例明显低于2016财年。考虑到多域作战环境的复杂性、网络威胁和有争议的电磁频谱环境，生存能力评估正变得越来越多元化，显示生存力差的项目比例随着时间的推移而增加。网络安全是最常见的生存力问题。网络安全问题包括供应链漏洞、未加密软件，以及针对各种网络威胁的系统特有漏洞。其他生存能力不足包括在有争议的电子战环境中作战的挑战，以及系统设计特有的对特定动能威胁的脆弱性。 
1）项目经理应制定稳健的网络安全试验与鉴定策略，包括对供应链脆弱性的评估；在设计阶段考虑网络安全，以减少潜在的攻击载体；收集数据，以评估任务效果以及预防、缓解和恢复攻击的能力；充分覆盖系统的攻击面；以及早期纠正缺陷，以提高在运行试验期间被评估为可生存的可能性。2）项目经理应制定充分的建模与仿真（M&S），作为外场试验的补充，并由使用可靠和相关数据的独立VV&a流程提供支持。由于国防部系统的复杂性、代表复杂作战环境的重要性和难度，以及我们对手的武器系统日益复杂，研发、集成和任务级评估越来越需要建模与仿真。3）项目经理应通过在设计阶段早期和整个研制过程中评估人-系统集成（HIS），确保HSI评估足够严格，以便在作战试验之前发现并解决缺陷。项目经理还应根据系统的复杂程度，计划足够的操作员和维护人员培训。对于许多系统，应扩大动手和单元集体培训的程度，并应更多地关注提高可靠性，以及在作战试验之前开发、完善和验证操作员和维护手册。4）项目经理应在可能的情况下进行早期的、可操作的真实试验活动，包括作战评估、有限用户试验和一体化试验。当在项目开发的早期进行，并且在整个采办周期内有足够的资源时，可操作的真实试验与鉴定为在项目成熟之前识别和纠正问题提供了独特的机会。早期问题发现使项目经理能够在过程的后期管理成本和进度，并尽早修复问题，以便在最终作战试验、战场或更糟糕的战斗中首次发现问题。为了实现这一点，项目经理必须构建他们的合同，要求在早期试验期间演示与作战相关的任务级目标，而不是只关注规范符合性。作战试验与鉴定（OT&E）是在预期的任务背景下，确定系统的作战效能和适用性，以及系统及其使用人员的生存能力。DOT&E认为，这种简洁的表述掩盖了在真实作战条件下评估武器或其他技术的挑战，即在预期的物理环境中，在预期的战术条件和作战计划下使用武器或其他技术的作战人员，面临着准确复制潜在对手的威胁的难题。武器系统越来越复杂；对手也变得越来越老练和有能力；联合多域作战，包括陆地、空中、海上、太空和网络空间，现在是主宰的作战概念。执行严格、可信的OT&E的需求并未减少；事实上，这可能比以往任何时候都更加关键。DOT&E特别强调，在过去的一年里，竞争对手展示了与美军相匹敌并超过自己的技术进步，例如在高超声速导弹方面。美军感受到一种异乎寻常的紧迫感，而DOT&E同样感受到这种紧迫感。国防部采办路线上的大量新技术、快速变化的威胁形势，以及以日益加快的相关速度部署系统的需求，将使美军现有的基础设施、工具、流程和知识库紧张或不足。美国国防部早在20多年前就提出了一些改善采办结果和试验鉴定（T&E）效能和效率的原则和方法。例如，早期让作战试验人员参与采办过程；越来越有效地使用模型和仿真；在可能的情况下，综合不同类型的试验；共同进行作战试验和训练演习，以及类似“左移”的主张，并实施了基于性能的采办。国防部一贯采用的渐进式发展模式，其发展的速度已经不足以满足国家安全的需求，尤其是作战试验与鉴定方面。为了继续履行OT&E对作战人员的义务，需要进行一场T&E革命。这场T&E革命应该从哪里开始？2021年1月，DOT＆E发布的《科技战略规划》，为DOT&E实施T&E转型提供了技术方向和重点。《科技战略规划》是DOT＆E未来五年作战试验鉴定的基本蓝图，规定了作战试验鉴定转型的五个重点领域。软件和网络安全T&E处于五个重点领域之首。绝大多数国防部系统都是软件密集型系统。软件质量和系统的整体网络安全往往是决定作战效能和生存力、有时甚至是杀伤力的因素，对生存力方面尤其重要。许多国安专家预测，下一次珍珠港事件不会以炸弹摧毁船只的形式出现，而是以关键打击和隐藏的恶意软件的形式出现，使舰队在母港或已在海上闲置——这是一次同样有效的攻击，具有可否认性，对手以更低的成本获得类似的战术效果，由于缺少可见的屠杀，对公众舆论产生难以预料的影响。现在比以往任何时候都更重要的是，在我们的武器系统上获得正确的网络安全对于它们在外场实际有用至关重要。作战人员、指挥官和项目主任依靠作战试验与鉴定来告诉他们网络安全风险及其潜在后果，并帮助他们设计缓解方案，以应对能力丧失。这意味着我们必须确保我们了解威胁，并且能够在试验期间准确地模拟它，我们可以描述整个攻击面，包括系统连接的网络和其他平台。云计算等商业技术和服务的使用增加了另一层需要评估的风险：这些商业产品、服务及其供应链是否安全且适合军事用途？不可否认，网络安全OT&E需要巨变。国会预期国防部将对广大系统进行强有力的网络安全试验，这只会加剧这种需求。网络安全试验必须准确，但不得危及运营商。它必须揭示该系统是否可被黑客入侵，是否会受到危害，以及会产生什么影响。操作员是否会根据伪造的系统读数做出错误的选择？是否失去了某些进攻或防御功能，进而妨碍个人或部队完成任务？或者，平台是否完全关闭？加强作战试验的工程严密性是一个起点。必须将网络安全试验与鉴定拓宽到检查整个平台和系统体系结构，以及反映联合多域作战的作战概念。更广泛地使用自动化试验方法也是必要的，也许人工智能和机器学习会增强这种方法；由于试验要求的规模和范围，单纯依靠人类进行网络安全OT&E已不再可行。项目进度必须适应作战相关试验的一种迭代方法以及试验-改进-试验循环所需的时间和资源。这些试验-改进-试验循环从最小可行产品开始，持续到（甚至可能超过）全面部署决策。作战试验界，以及整个国防部，将必须建立一个更大、更深层次的网络专业知识平台，包括内部和外部的网络专业知识，以便根据需要进行开发。在系统设计和开发的早期阶段——早在作战试验开始之前——正确掌握网络安全原则，是采办团队可以采取的一个步骤，以培养系统弹性，并使项目取得长期成功。作战试验人员和受过进攻和防御网络作战训练的作战人员具备必要的知识。DOT&E随时准备协助任何项目办公室纳入正确的网络安全原则，使其平台能够应对不断快速变化的威胁。转型T&E以确保整个国防部系统和保障供应链的网络安全，将需要我们与国防部内部、整个联邦政府、工业界和学术界的合作伙伴以及我们的国际盟友进行合作。试验与鉴定的质量——以及最终的作战能力——取决于我们使用的试验与鉴定工具、基础设施和流程的质量。T&E必须能够处理所提出的任何技术，并且必须反映真实世界的环境和场景，包括对威胁和对抗的准确复制，以便全面、具有作战代表性和可信。（面临的任务）针对在研系统或即将开发的系统类型的需求，T&E复杂组织体并没有做好必要的准备。国防部的大部分露天试验和训练场及实验室都已过时，必须进行现代化改造，以适应当今和未来作战环境的复杂性和能力。我们已经知道，人工智能、自主和自适应系统、天基系统、定向能、高超声速和生物技术将挑战国防部的试验与鉴定能力、设施和方法。为了跟上现代战场上预期的技术进步，并在复杂和动态的多域作战环境中充分试验和训练美国和盟军伙伴部队，国防部需要对T&E基础设施进行大量持续投资。本报告的T&E资源部分提供了有关关键T&E能力缺陷的更多细节，我们必须解决这些缺陷，以支配下一场冲突。随着新技术和作战理念的出现，我们几乎肯定会发现更多的差距。2020年末，DOT&E委托美国国家科学院、工程院和医学院（NASEM）评估用于作战试验与鉴定的靶场、基础设施和工具。主要问题是：国防部能否在2025-2035年的时间框架内，按照预期的系统和技术，对我们的作战人员进行可靠的作战试验与鉴定？NASEM在2021年9月完成了这项研究的第一部分，并公布于众，预计将在FY22中后期完成第二部分。DOT&E将审查这两部分的调查结果和建议，以帮助国防部制定全面的复杂组织体范围的现代化和投资计划。DOT&E将敦促国防部利益相关者立即在2025年前后开始实施。DOT&E已经在致力于改革作战试验与鉴定以及整个采办过程中最重要的一个方面：数据管理。捕获正确的数据，与正确的人共享，并及时做出最佳的数据驱动决策，对于以需要的速度试验和部署高质能力至关重要。然而，当作为一个整体进行分析时，在T&E的所有阶段（承包商试验、研制试验、一体化试验和作战试验）收集的数据的效用可能会更广泛。这些海量数据可能会揭示系统设计和性能、威胁复制和仿真、试验设计和执行、项目管理以及其他领域的趋势，这些领域将重塑国防部的决策。但我们利用这一宝藏的能力目前有限：国防部缺乏手段用于积累、安全存储、轻松访问和查询、跟踪并快速分析其所收集的丰沛的试验数据。DOT&E最近聘请了外部专家帮助改进其处理和使用试验数据的方式，我们欢迎国防部内外正在进行的其他数据分析项目的信息。我们的目标是与其他国防部利益相关者合作，开始制定数据管理能力和体系架构蓝图草案。科技战略计划的第三个重点领域是建立一个一体化试验与鉴定寿命周期。这一概念并不新鲜，但到目前为止，国防部尚未完全落实。DOT&E认为，国防部提高T&E效能和效率的最佳途径是大幅减少（如果不是消除）独立的承包商试验（CT）、研制试验（DT）和作战试验（OT）。需要用一个一体化的CT、DT和OT过程来取代这种分离的、顺序的方法，以便尽可能在任务结构内最大限度地提高试验效率和效能。实际上，这意味着设计试验事件以收集满足DT和OT需求的数据（如果可能）。此外，项目经理必须让预期用户和试验人员参与制定系统规范，以确保它们与作战相关且可试验；以及参与编制合同条款，以确保试验要求尽早满足OT需求，并收集正确的数据。DOT&E目前正在与国防部副部长（研究与工程）研制试验、鉴定和评估团队合作，研究如何扩大一体化试验与鉴定窗口。目标是实现灵活性、效率和便利性。考虑到这一点，作战试验界必须扩大与DT和项目办公室的合作伙伴关系，以最大限度地实现提供作战相关数据的一体化试验。美国防部正在努力跟上工业界和我们的对手对数字研发和T&E能力的采用步伐。除了需要新的工具和数据管理实践之外，最关键的不足是“数字孪生”和建模与仿真（M&S）。试验团体在20多年前就认识到了M&S的必要性。随着时间的推移，这一需求只会变得更加紧迫。由于各种原因，在具有威胁代表性的环境中进行实战试验并不总是可行的。当这种情况发生时，我们必须拥有高保真度、作战逼真的建模与仿真场所，以产生足够高置信度的数据，为确定作战效能、适用性和生存能力提供信息。这些场所必须不断更新，并进行持续验证、确认和认证（VV&A），尤其是对受试系统和描述的威胁。基于实况（非仿真）事件期间收集的数据的可靠VV&A至关重要。最近某些实况作战试验的结果与建模与仿真预测的结果存在显著差异。创建准确、高质量的建模与仿真是一项复杂的工作，但我们必须继续投资于此，并通过VV&A进行跟进，以确保我们的作战人员和指挥官能够信任作战试验与鉴定结果。DOT&E《科技战略规划》最后一个重点领域是T&E人员队伍。复杂技术的试验与鉴定需要大量深入而广泛的前沿专业知识。国防部既需要吸引更多人才为政府服务的机制，也需要获得与学术界和工业界专家的一致、按需访问的机制。DOT&E期待着与国防部利益相关者、工业界和国会合作，改善T&E人才开发、获取和管理，以确保T&E界在未来十年继续为作战人员提供出色的支持。四、DOT&E内部结构重组：新建战略计划、政策和新兴技术部门为了帮助T&E转型创造条件，DOT&E去年夏天发起了内部重组。本着一体化试验与鉴定的精神，DOT&E将实弹试验与鉴定（LFT&E）职能和人员并入作战领域部门，以更好地协调我们的工作。DOT&E的LFT&E专业知识和监督能力保持不变；LFT&E项目不会减少。为了确保作战试验与鉴定能够满足作战人员和决策者对可靠、独立数据和分析的需求，DOT&E成立了一个专注于未来的新部门——战略举措、政策和新兴技术副总监（SIPET），改部门将积极主动地寻找OT&E需求、差距和潜在解决方案；制定新的经营方式；并帮助服务和机构运营测试机构解决问题。SIPET还将与整个部门的利益相关者合作，制定和完善作战试验政策指南。SIPET将解决的第一个领域包括网络安全测试指南和建模与仿真验证、确认与认可（M&S VV&A）指南。通过将人员投入到规划新兴技术、挖掘共享T&E挑战和大范围头脑风暴的全职任务中，SIPET将在作战试验界培养更大的灵活性和响应能力。其目的是创造条件，更频繁、更快地“左移”，并取得比今天更好的结果。DOT&E也重新调整了年度报告本身。一份新的执行摘要强调了2021财年的主要DOT&E成果、贡献和调查结论。
－ The End －
版权声明：欢迎转发本号原创内容，转载和摘编需经本号授权并标注原作者和信息来源为云脑智库。本公众号目前所载内容为本公众号原创、网络转载或根据非密公开性信息资料编辑整理，相关内容仅供参考及学习交流使用。由于部分文字、图片等来源于互联网，无法核实真实出处，如涉及相关争议，请跟我们联系删除。我们致力于保护作者知识产权或作品版权，本公众号所载内容的知识产权或作品版权归原作者所有。本公众号拥有对此声明的最终解释权。
投稿/招聘/推广/合作/入群/赞助 请加微信：15881101905，备注关键词
“阅读是一种习惯，分享是一种美德，我们是一群专业、有态度的知识传播者.”
↓↓↓ 戳“阅读原文”，加入“知识星球”，发现更多精彩内容.
分享💬 点赞👍 在看❤️@以“三连”行动支持优质内容！
