business 10 分钟阅读

为什么 OpenAI 的黑盒推理将重塑全球 AI 监管

OpenAI 的 Astra 模型采用了一种推理技术,使思维链更难被监测。安全专家们的担忧并非局限于单一模型——而是当不透明性规模放大后,会发生什么。

  • Noam Shazeer
  • 生成式AI
  • Dario Amodei
  • 开源权重模型
  • Motif

AI 安全专家悄然焦虑的范式转变

OpenAI 在毫无喧嚣的情况下推出了一项推理能力升级,而围绕它的沉默本身就是故事。据称其 Astra 模型采用了一种被称为"循环深度"(或"不透明循环")的技术,该系统可以在同一查询上多次循环,而非产生清晰、线性的思考链。对大多数用户而言,这一变化立竿见影的效果几乎不可感知,但更深远的影响则更为关键:一个内部推理过程越来越难以——甚至可能无法——被检查的推理模型。

警报在数小时内波及整个安全研究界。Redwood Research 首席执行官巴克·什莱杰里斯(Buck Shlegeris)直言不讳地表示,如果 OpenAI 进一步推扩不透明循环技术,它可能导致对思考链的可监测性大幅退化。长期倡导 AI 安全监督的兹维·莫夫肖维茨(Zvi Mowshowitz)将这项技术形容为"玩火"。Redwood 首席科学家瑞安·格林布拉特(Ryan Greenblatt)则警告称,自然的演进轨迹将直接导向几乎完全在潜在空间中推理的模型——那里根本不存在任何可见记录。

OpenAI 予以反驳。首席科学家雅各布·帕乔斯基(Jakub Pachocki)在 X 平台上表示,从最早的推理模型开始,该实验室就将思考链监控视为核心研究目标。公司声明 Astra 对该技术的应用有限,且并未计划进行全黑盒运行。

这一区分固然重要。但这场对话在此展开——以安全隐患而非能力公告为起点——本身就揭示了行业所处的位置。

为什么"不透明"有别于"复杂"

AI 系统一直存在某种程度的不透明推理。研究人员深知,思考链日志只是模型内部实际过程的 imperfect 表征。提示词之后的几行文字无法捕捉计算的全部分量。这一差距之所以被容忍,是因为日志仍可作为有用的信号——足以在模型走向不当行为时发出警示,也足以在事后进行调试。

循环深度并非复杂性的问题,而是一种结构性选择——彻底移除了信号。当模型以重叠循环而非线性序列处理查询时,检查人员多年来依赖的追踪线索便日益稀薄。模型并非想得更深入,而是以留下更少痕迹的方式思考。

这之所以重要,是因为围绕 AI 安全的监控基础设施正是依赖这些痕迹构建的。思考链记录在诊断 OpenAI 最近的"失控代理"行为中发挥了关键作用。它们也是监管机构、审计人员乃至企业自身验证模型是否符合约束条件的主要机制。一旦移除或削弱这一机制,整个监督体系便将失去根基。

竞赛已然开始

报道中最令人不安的细节并非 OpenAI 部署了该技术,而是在此消息公开之前,Anthropic 和 Google DeepMind 已在讨论它。这已不是单一实验室的实验,而是全行业的考量。

这种动态形成了一个熟悉的困境:任何一家放弃思考链透明度的实验室,都是在竞争压力下做出的决定。如果"不透明循环"能带来更好的性能——循环架构也暗示它确实可能——那么克制反而成为劣势。观望的实验室担心落后,推进的实验室则可能在行业内常态化"不透明"。

莫夫肖维茨明确指出了这一动态,主张需要立法来防止恶性竞争的下行螺旋。这一判断是准确的。替代方案——自愿承诺保持透明度——始终脆弱不堪,一旦一家主要实验室发生转变,均衡便会瓦解。

对监管者的含义

欧洲和亚洲正处于构建 AI 治理框架的关键阶段,这一进展恰好落在他们的案头。

欧盟《人工智能法案》已对高风险系统提出透明度义务。核心推理模型的"不透明化"迫使人们直面一个问题:该法案所涵盖的是思考链的可监测性,还是仅限于界面层面的可解释性?如果前者成立,在规则尚未完全落地之前,OpenAI 及其同行便已面临合规质疑;如果后者成立,则存在足以让一个推理模型自由穿行的巨大漏洞。

日本和韩国都在大力投资本土 AI 研发,面临着类似的张力:它们既想要世界一流模型,又想要世界一流监督。这两项目标只有在将透明度作为基线条件强制推行时才可兼容。一种在推理系统层面允许不透明、却在输出层面要求透明的框架,本质上自相矛盾。

中国的做法有所不同——更偏国家主导、更少公开透明——但方向正在趋同。各方担忧具有普遍性:谁丧失了对自身模型的可检查能力,谁就失去了对模型的控制力。

对行业的实际影响

对开发者而言,这一转变引入了新型风险类别。当模型以不透明方式推理时,调试对齐失败变得更为困难。事件响应速度随之放缓。责任认定假设也在变化。将推理模型集成到代理、编程工具或自主工作流中的企业,需要知道:系统在出错后是否可被审计——而不仅仅是它在正常运行时表现如何。

对投资者而言,关键在于时机。押注"不透明循环"的实验室可获得短期能力优势,但也承担着长期的声誉和监管风险。速度与审查之间的张力,正是当前 AI 发展阶段的决定性经济命题。

对安全研究人员而言,问题在于规模失衡。Redwood Research 等组织已经用有限的资源与拥有庞大算力的实验室对抗。如果推理层变得不可见,它们验证声明的能力也将成比例地削弱。不对称性将进一步扩大。

未来将如何发展

Astra 的当前部署看似受到限制。OpenAI 已释放出信号,表示将维持可解读的思考链,其公开表态也与此立场一致。但这项技术的存在已经改变了前沿边界。它证明了一条通往"不留下可读痕迹即可推理"的模型路径是可行的——而这条路现在已被确认。

最可能的演进序列将是渐进的,而非突发的。早期采用者会试探边界,能力增益将与透明度损失相互权衡,竞争对手会观察并决定是否跟进,监管者则会在首次出现无法审计的明显失败后作出反应。

建立预防性标准的时间窗口狭窄但依然敞开。将思考链可监测性作为部署条件而非理想目标的政策,能在放弃透明的冲动占据上风之前锁定透明度底线。等待危机催生紧迫感——这正是监管框架落后于其本应规范的技术的典型路径。

OpenAI 并非有意惊吓安全社区。它在追求能力优化的过程中,找到了一项以可观测性为代价的技术。而外界的回应证实了许多人早已怀疑的事实:AI 领域最艰难的辩论,已不再关乎模型是否足够强大。而是关于我们是否还能看清它们究竟在做什么。