technology 9 分钟阅读

当AI说谎,士兵险些开火

一份由AI生成的美军报告错误声称中国船只运输核武器零部件,引发险些交火的紧张局势。这一事件暴露了AI采用与经核实的情报协议之间存在的危险缺口。

  • 太空战争
  • KakaoAI
  • 费多罗夫
  • 伊朗原油出口
  • 虚假信息

那份险些引发战争的报告

一份由美国军事情报部门生成、并借助人工智能辅助制作的报告, falsely 声称中国船只正在运输核武器组件。该报告在防务界引发了一轮警觉浪潮,使世界两大军事力量之间出现了一段短暂却实实在在的接近战状态。当分析师后来追溯该说法的来源时,他们发现它并非建立在任何经核实的情报之上,而是建立在人工智能之上。

这并非假设情景。这是一起真实事件,其意义远超一份被更正的报告所带来的即时尴尬。它揭示出一种结构性脆弱:与美国军方一样,世界各地的武装部队正将其人工智能整合进情报流程的速度,快于它们建立验证这些系统产出所需协议的速度。

谁被归咎,实际发生了什么

日文媒体报道将此事表述得相当清晰:一份美国军事情报报告引用了由人工智能生成的内容,其中包含有关中国船舶运输核部件的虚假说法。结果造成了短暂的紧张局势——警报级别飙升,内部可能陷入慌乱,至少决策者在某些时刻是在依赖经不起推敲的信息上运作。

尚不明确、且英文来源尚未充分详述的,是事件的确切链条:哪一个人工智能系统制作了这份报告、它如何进入情报工作流、以及是否有人员行动。现有报道并未点名具体系统或个人。但它可以确认的是,该虚假报告已被查明并撤回,且这一事件已被足够严肃地对待,以至于足以在日本媒体生态内部引发公开讨论。

为何这是标志性案例

人工智能在新闻业、法律以及企业环境中产生的幻觉早已存在。针对选举的人工智能驱动虚假宣传行动也曾出现。但一份由人工智能生成的虚假情报报告进入美国军方的作战感知,并几乎向与中国的真正对抗升级——在性质上完全不同。

军事情报的运行节奏与新闻编辑室并不相同。一条假新闻标题可以在同一天更正。而一份关于具备核能力的运输的虚假军事评估,可能引发态势调整、资产重新部署、外交抗议,在最坏情况下甚至引发武力决策。从发现到更正之间的延迟期就是危险区,而人工智能以不可预测的方式压缩了这一窗口。

采用与验证之间的差距

五角大楼一直在其情报、监视与侦察体系中激进地采用人工智能。联合全域指挥与控制倡议等项目以及各种人工智能辅助分析工具的设计目标,是处理现代军队所收集的庞大信息量。其目标正当:人类分析师无法逐一手动审查所有内容,而人工智能可以揭示那些原本会被人忽略的模式。

但缺乏验证的速度并非优势——而是负债。雅虎新闻所报道的这起事件恰恰凸显了这一鸿沟。人工智能系统能够根据部分、模糊、甚至虚构的输入生成看似合理的技术报告。当这些产出进入以时效性为优先的分类流程时,并没有自动制动机制。

防务人工智能治理——伴随此类技术应建立的规则、检查与问责结构——尚未跟上步伐。这不是意图上的失败。这是制度设计上的失败。包括美国国防部在内的绝大多数军事组织,目前尚未建立对人工智能生成的情报在到达决策者之前进行认证的标准协议。

谁赢谁输

谁从这类事件中获益?那些因美中之 perceived instability 而获利的对手。任何能够在西方情报可信度上播撒困惑的行为体,都能获得战略杠杆,即使这种收益是间接的。这份虚假报告涉及核武器组件这一事实,更使其具有特别的破坏性:它契合了有关中国军事透明度的既有叙事,并引发了可能毒化外交渠道多年的疑虑。

谁受损更为直接。美国军方因其自身产品需要公开撤回而丧失公信力。更广泛的防务人工智能共同体则失去信任,使为该技术的负责任投资辩护变得更加困难。依赖美国情报共享的美国盟友可能会开始对验证标准提出更尖锐的问题——而这些问题将是北京乐于放大的。

接下来会发生什么

直接的后果可能是内部性的:对人工智能生成内容如何进入军事情报工作流程的审查,随后是新的护栏措施。这些措施可能包括强制的人机核验层、人工智能辅助报告的审计追踪,以及明确人工智能系统在无分析师直接监督下可产出的内容的分类边界。

但审查与护栏的建立往往缓慢。技术不会等待。人工智能模型正在迅速改进,其产出也越来越难以与人类生成的分析区分开来。没有结构性改革,下一份虚假报告将不再是例外——而会成为常态。

更长远的影响更为深远。全球各国都在关注这起事件。中国军队正在现代化其自身的人工智能能力。俄罗斯也在这样做。问题不在于人工智能是否会塑造未来的军事情报——它已经在这样做。问题在于验证协议能否足够快地建立起来,以防止下一份虚假报告演变为真正的危机。

更大的图景

这起事件位于三个紧迫趋势的交汇点:人工智能的军事化、可信信息生态系统的侵蚀,以及中美战略稳定的脆弱状态。单独每一项都已值得注意。但三者叠加,构成了一个防务共同体尚未学会管理的复合风险。

关于中国核运输的虚假报告终将沦为历史注脚——即便它此刻正在五角大楼的行动后审查中被归档。但注脚会不断累积。每一个都标记了系统几乎失败的位置。现在的任务,是确保下一份人工智能生成的错误不要接近开启某个不可撤销的进程。