

DARPA 正在为尚未出现的战争机器制造维修手册。这就是“面向目标支持的自主多模态摄入”(Autonomous Multimodal Ingestion for Goal-Oriented Support),简称 AMIGOS 的项目前提,该项目利用人工智能和增强现实技术为军事机械师和医务兵组建实时培训手册。
12 月 16 日,施乐(Xerox)的研究部门 PARC 与加州大学圣巴巴拉分校、罗斯托克大学以及增强现实公司 Patched Reality 合作,获得了五角大楼蓝天项目部门 DARPA 授予的 580 万美元合同。目标是创建一个能够指导用户完成超出其现有知识范围的复杂操作的程序,例如让一名机械师修理他从未见过的机器。
“增强现实、计算机视觉、语言处理、对话处理和推理都是人工智能技术,它们各自都颠覆了许多行业,但从未如此协调和协同地发挥作用,”AMIGOS 的首席研究员 Charles Ortiz 在施乐的发布会上说,“通过利用现有的教学材料来创建新的 AR 指导,AMIGOS 项目有望加速这一进程,从而提供按需提供的实时任务指导和反馈。”
AMIGOS 属于 DARPA 更广泛的“感知增强任务指导”(Perceptually-enabled Task Guidance)研究目标,该研究基于这样一个理解:人类的能力有限,不可能在被派往战场之前学完所有将要执行的体力任务。然而,这些人在执行任务时,几乎不可避免地要处理新的伤病或修理不熟悉的机器,这几乎是军事工作的本质。
[相关:这些增强现实眼镜让士兵能够看穿车辆墙壁]
设想一个这样的假想场景。在 2033 年的一个海军基地,一名机械师可能被指派修理一种新缴获的、损坏的水下机器人。该机器人的图纸存储在美国的服务器上,制造它的工程师在醒着的时候可以随时联系。但这名机械师从未见过这个机器人,而且是现场唯一有某种相关经验可以修理它的人。
通过佩戴由 AMIGOS 驱动的头显,这名机械师可以查看机器人,找到打开其处理器的舱门。在她工作时,她会看到下一步操作的视觉显示,所有这一切都由与图纸存储在同一服务器上的 AI 提供支持。当机械师继续维修时,该 AI 会自动生成用户手册,并根据这名机械师已有的知识来调整指令,让陌生的事物变得熟悉。
正如其承诺的那样,AMIGOS 在最需要的时候,提供了类似一位得力朋友的帮助,指导某人第一次完成一项新的体力任务。
目前,该项目将着力于为 AMIGOS 创建两个组成部分。施乐将其中一个描述为一种离线工具,可以扫描手册和其他教学材料(如视频)中的文本,以创建任务所需的循序渐进的指南。第二个组成部分是在线的,旨在利用 AI 将手册的指令改编成实时的教学指南。离线组件负责摄入学习材料,为在线组件做准备,在线组件则利用摄入的手册为用户实时生成更新的指南。
它同时是学习的实践和教学的工具,以互动速度提供结果。
“预计军事人员将执行比以往任何时候都多、更复杂的任务,”DARPA 关于“感知增强任务指导”的描述中写道,“例如,机械师需要修理更多种类、越来越复杂的机器和平台,医务兵则需要在更长的时间内执行更多程序。”
[相关:陆军的这款炫酷微软 AR 眼镜目前还不会大规模部署]
无论是机器还是人体,修复都是高度专业化的任务,需要多年的培训,并且通常需要专业要求进行继续教育。AMIGOS 的任何部分似乎都不是为了取代这些。相反,通过在增强现实头显中实时提供手册知识,AMIGOS 可以将至关重要的知识传达给原本无法获得这些知识的人。
即使有指导,临时学习也不是理想的,但它比医务兵因为不确定如何进行而无法在战场上治疗危及生命的伤害要好得多。