资讯🔥7.0
万字详解GPT-6 Astra,Sebastian Raschka带你读懂循环Transformer与隐藏的思维链
原标题: 万字详解GPT-6 Astra,Sebastian Raschka带你读懂循环Transformer与隐藏的思维链
📋总体概括
OpenAI新旗舰GPT-6 Astra发布前后,其采用的recurrent depth(循环Transformer)设计引发AI安全争议,因该设计可能使部分乃至全部推理过程不可见。首席科学家Jakub Pachocki出面澄清,称当前前沿模型计算图深度与GPT-4差距仍在两倍以内,试图避免「奔向不可监控性的竞赛」。技术博主Sebastian Raschka随后发布长文,系统拆解循环深度与隐藏思维链的技术原理。
⚡关键信息
- ▸The Information在GPT-6 Astra发布前两天援引内部消息称其采用recurrent depth设计,可能让推理过程不可见
- ▸OpenAI首席科学家Jakub Pachocki亲自澄清,称希望避免由混乱报道引发的奔向不可监控性的竞赛
- ▸Pachocki表示包括Astra在内的当前前沿模型,计算图深度与GPT-4的差距仍在两倍以内
- ▸《Build a Large Language Model (From Scratch)》作者Sebastian Raschka撰写万字长文,公开拆解循环Transformer技术细节
- ▸循环深度一词在过去两周成为AI安全讨论焦点,争议围绕可解释性与监控能力展开
🔥犀利点评
这事的本质不是技术,而是叙事权争夺:媒体抢先抛出「不可见推理」制造恐慌,OpenAI再用「深度差距两倍以内」这种模糊措辞灭火——两边都没说清循环深度到底藏了多少计算。Raschka的长文价值在于把情绪拉回工程事实,但别忘了,行业正集体用「可解释性换性能」,Astra只是第一个被抓到现行的。监管若再缺席,奔向黑箱的竞赛不会因一次澄清刹车。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 华尔街见闻 阅读全文 →