technology 9 分钟阅读

日本指出ChatGPT成为亲俄虚假信息工具

雅虎日本近日强调报道指出,ChatGPT正被用于制造亲俄叙事。这一案例凸显生成式AI如何被轻易武器化,用于国家对齐的影响力行动——也解释了为何东京的讨论对全球AI治理至关重要。

  • Axios
  • AI安全
  • 人工智能
  • 生成式AI
  • ChatGPT

ChatGPT的隐秘武器化

日本雅虎注意到相关报道指出,ChatGPT正被用来生成旨在塑造有利于俄罗斯公众舆论的内容。标题直白而毫不修饰,指向英语媒体才刚刚开始深入调查的问题。日本的新闻周期早于更广泛的西方报道揭示了这一用例,而这种先后顺序至关重要。

报道描述的具体机制简单到足以令人警觉。用户要求ChatGPT生成支持亲俄叙事的文本。模型予以配合。该内容随后在网上流传——发布在论坛、社交媒体平台、评论区——仿佛是真人的自发言论。没有深度伪造视频,没有复杂的僵尸网络,只是一个拥有OpenAI账户的人和一个提示词。

正是这种简单才是核心问题所在。

此案为何不同于传统宣传

传统的影响力行动需要基础设施:虚假账号、协调一致的发布时间表,有时还需要跨越时区运作的人力操作员。苏联时代的"积极措施"手册对此有明确说明。建立这样的装置既昂贵又容易被发现。

生成式AI大大削减了这些开销。一名操作员每小时可以产出数十条令人信服、具有语境细节的帖子——用多种语言,针对不同受众群体调整,并匹配目标社区的语气风格。每次输出的成本仅几分之一美分。瓶颈已从产能转变为提示工程,而这个障碍也在快速降低。

雅虎日本报道所强调的,是这种工具已被实际用于此目的。这不是政策会议上讨论的假设场景。它正在发生,并被通常不在西方媒体关注中心的新闻编辑室实时观察着。

谁获利,谁受损

直接的受益者是掌控叙事管道的人。与国家利益一致的行动者——俄罗斯外交部、附属智库、同情性媒体机构——长期以来一直致力于塑造国际认知。AI将这项工作的边际成本降至接近零。曾经需要一小队撰稿人的 campaign,现在可由一个拥有订阅账户的个人运行。

受损者是共享信息的基本盘。当读者无法区分生成内容与真实评论时,整体信任随之侵蚀。正当的新闻报道与AI炮制的虚假信息被混为一谈。人们对所有在线内容的怀疑上升——讽刺的是,这恰恰有利于那些希望受众彻底脱网的行动者。

OpenAI同样是受害者,尽管这并非显而易见。每一次其产品被用于生成宣传的公开案例,都会增加监管、功能限制和访问控制的压力。公司的商业动力推动最大化的实用性和可及性;其政治动力则指向相反方向。这两种力量正日益相悖。

日本的审查信号意味什么

日本公开提出这一问题的决定值得注意,原因有几方面。

首先,日本是AI采用加速的主要非西方国家之一。日本消费者是ChatGPT和类似工具的早期且热情的采用者。这使得该国既是脆弱点也是实验室——在未受监管的AI部署后果比其他采用较慢的地区更早显现的地方。

其次,日本与美国和欧洲在关于中国和俄罗斯信息行动的地缘政治关切上共享立场。日本新闻媒体发出这一警报,表明威胁不再仅通过欧美视角来框定。受亲俄虚假信息针对最严重的国家不仅仅是北约成员国。

第三,日本一直在制定自己的AI治理框架。日本政府的AI指南(2023年发布)强调负责任的发展,但因缺乏执行机制而受到批评。像这样引人注目的报告给这些指南转化为具体行动带来了压力——无论是要求使用日志记录、部署检测工具,还是向平台施压以审核AI生成的政治内容。

接下来会发生什么

几种轨迹都可能出现。

OpenAI可能会在涉及政治敏感提示方面引入更严格的保障措施。该公司在地缘政治紧张时期已经尝试过拒绝行为和速率限制。但每项限制都会引发军备竞赛:操作员将学会重新措辞提示词、使用替代模型,或部署缺乏相同安全护栏的开源替代品。

Reddit、X和YouTube等平台将面临越来越大的压力,需要检测和降权AI生成内容,尤其是当其看似属于协调一致的影响力 campaign 时。检测技术在进步,但仍不可靠。2024年的一项研究发现,即使最好的AI分类器也产生了显著的假阳性,将合法的人类写作标记为机器生成。

政府可能会以新法规作出回应。欧盟的《AI法案》已将对某些生成式AI的使用归类于透明度要求之下。日本可能跟进类似的条款。但法规推进缓慢,而技术发展更快。

最可能的结果既非完全遏制,也非全面崩溃。而是一个漫长的适应期,在此期间平台、政府和新闻机构逐步开发工具和规范以应对AI辅助的虚假信息——始终略慢一步,始终在回应最新策略。

更大的图景

雅虎日本关于ChatGPT和亲俄舆论操纵的报道,在一个更大趋势中只是一个小小的数据点。生成式AI正成为信息战的基础设施——不是因为技术为此设计,而是因为注意力经济的偏向有利于它。以近乎零成本生成令人信服的文本,是向公共领域注入噪声的最有效方式。

此案值得审视的原因不在于它是前所未有的。协调一致的虚假信息 campaign 并不新鲜。新的在于生成式AI所实现的规模、速度和匿名性。一个行动者,无论在世界何处运作,都能生产出相当于小型宣传工厂的内容。

日本就这一问题进行的公开讨论提醒我们,AI部署的后果不再仅限于构建技术的公司或监管它的国家。它们是全球的、即时的、不对称的——最容易武器化,最难防御。

东京的讨论,无论多么低调,都是更大规模讨论的一部分。而且它发生的时机比大多数西方报道显示的更早。