资讯

万字详解 GPT-6 Astra,Sebastian Raschka 带你读懂循环 Transformer 与隐藏的思维链

原标题: 万字详解 GPT-6 Astra,Sebastian Raschka 带你读懂循环 Transformer 与隐藏的思维链

华尔街见闻·2026/9/15 02:17:10🔗 原文

📋总体概括

OpenAI新旗舰GPT-6 Astra发布前后因「循环深度」(looped transformer)设计陷入安全争议,The Information称该设计可能使部分乃至全部推理过程不可见。OpenAI首席科学家Jakub Pachocki出面澄清,称要避免「由混乱报道引发的、奔向不可监控性的竞赛」,并表示当前前沿模型计算图深度与GPT-4差距仍在两倍以内。随后技术博主Sebastian Raschka发表万字长文,系统讲解循环Transformer与隐藏思维链的技术原理,为混乱的公共讨论提供技术底稿。

⚡关键信息

  • ▸GPT-6 Astra发布前两天,The Information援引内部消息称其采用recurrent depth(循环Transformer)设计。
  • ▸报道称该设计「会让模型的部分乃至全部推理过程变得不可见」,引发AI安全圈激烈争论。
  • ▸OpenAI首席科学家Jakub Pachocki亲自澄清,强调要避免奔向不可监控性的竞赛。
  • ▸Pachocki透露当前前沿模型计算图深度与GPT-4的差距仍在两倍以内,间接回应失控传闻。
  • ▸《Build a Large Language Model (From Scratch)》作者Sebastian Raschka发长文拆解技术细节。

🔥犀利点评

这场争议的本质不是技术,而是叙事权:The Information一篇匿名爆料就能逼得首席科学家亲自下场灭火,说明AI安全话语已成为媒体与公司博弈的战场。「不可见推理」确实戳中行业软肋——循环深度天然模糊了思维链的可审计性,监管者理应盯紧。但Pachocki那句「深度差距两倍以内」更像精心措辞的公关话术,深度不等于计算量,也未必等于可控性。Raschka的长文有价值,但科普救不了治理缺位。

本文由本站自动聚合,以下为原始来源:前往 华尔街见闻 阅读全文 →