美国防部自主系统研制试验与鉴定指南

美国防部（DoD）编制本指南旨在支持自主系统的试验与鉴定（T&E）。本指南阐述了在国防部系统中移除或极大减少人工操作员参与、并赋予未来自主系统在作战环境中独立行动所带来的全新挑战。这些挑战要求采用迭代方法评估自主系统日益增长的能力，以确保其在复杂作战环境中具备可信的任务能力。因此，本指南旨在：

• 识别并阐释国防部关于自主系统试验与鉴定的政策。
• 识别并阐释自主性试验与鉴定的总体挑战和具体挑战。
• 分享关于自主性试验与鉴定全周期的方法和最佳实践指南。
• 提供来自可信联邦来源的、关于自主性试验与鉴定工具和资源的信息。

本指南详述的信息主要关注政府独立试验团队在规划与执行自主系统试验与鉴定时面临的问题，同时也为支持或依赖试验与鉴定流程的利益相关方提供见解。认识到自主性是一项新兴技术，本指南旨在就当前问题提供可获取的最佳信息，并将随着技术和方法的发展而更新。

测试自主系统的一个关键挑战在于缺乏人工操作员进行持续控制，这要求自主系统在多样化的环境、任务条件和场景中执行动态的“观察-调整-决策-行动”（OODA）循环操作。这一总体挑战带来了许多复杂的困难，例如：

• 为自主系统行为设定的需求与作战概念往往过于宽泛或狭窄、不完整、不一致、主观、不可测试或定义不清。
• 对于能独立采取物理行动且不受人工控制的自主系统，其安全性将安全责任与风险从用户转移到了设计者、开发者和测试者身上。
• 数据问题层出不穷，例如真实性、可用性、可分析性、安全性和充分性。
• 黑盒软件或人工智能组件导致在未经测试的场景中性能未知。
• 适用于国防部的人机自主编组模型与衡量标准尚不全面或成熟。

为应对这些以及许多其他新兴挑战，本指南基于自主性试验与鉴定全周期所获得的经验教训，收录了以下方法和最佳实践：

• 基于任务与系统分解及迭代测试的端到端自主性试验与鉴定流程，用于证据汇集和自主系统可信度的持续确认。
• 采办与试验策略实践，例如开放系统架构；保证案例论证；广泛使用建模与仿真；以及实况、虚拟和构造性测试。
• 试验规划与执行方法，包括科学试验与分析技术、运行时保证、持续测试、对抗性测试和认知插装。
• 支持模型验证、风险量化和基于任务认证的数据分析。

本指南利用敏捷和迭代测试中的新兴最佳实践，将成功经验延伸至整个试验与鉴定周期。通过应用这些最佳实践来实现高效、有效和稳健的研制试验与鉴定，国防部的自主系统将为成功的作战试验与鉴定及作战运用做好准备。

成为VIP会员查看完整内容