美国国家科学技术委员会：国家人工智能研发战略计划——2019年更新（八）

美国国家科学技术委员会：国家人工智能研发战略计划——2019年更新（八）2020-06-10作为与AI相关的基准测试的成功范例，美国国家标准与技术研究院开发了一套全面的标准测试方法和相关的性能指标，以评估应急响应机器人的关键功能。目的是通过利用使用标准测试方法捕获的机器人能力的统计上重要的数据来促进不同机器人模型的定量比较。这些比较可以指导购买决策并帮助开发人员了解部署功能。通过ASTM国际安全应用标准委员会对机器人操作设备(称为标准E54.08.01)进行了标准化测试。1[99]测试方法的版本用于通过RoboCup救援机器人联盟比赛挑战研究社区，2[100]强调自主能力。另一个例子是IEEEAgileRoboticsforIndustrialAutomationCompetition(ARIAC)，3[101]IEEE与NIST的共同努力，4[102]通过利用人工智能和机器人规划的最新进展，提高机器人的灵活性。本次竞赛的核心焦点是测试工业机器人系统的灵活性，目标是使车间的人员更高效，更自主，并且需要更少的车间工人时间。虽然这些努力为推动人工智能基准测试提供了坚实的基础，但它们受到特