📌 📅昨天先是全球 AI 大宕机,然后 OpenAI 真把 GPT‑6 Astra 发布了。现在海外几乎全部的头部 Lab(OpenAI、Anthropic、G

图片

无图片

正文

📌

📅昨天先是全球 AI 大宕机,然后 OpenAI 真把 GPT‑6 Astra 发布了。现在海外几乎全部的头部 Lab(OpenAI、Anthropic、Gemini、Meta)都更新了自己最新的 AI 模型。 💻如果简单说,这个模型就是面向电脑操作的模型,面向知识工作的模型。 🎯OpenAI 自己的发布重点就是:旗舰模型开始更强调操作电脑、端到端完成工作。 📋上下文窗口 1.05M,最大输出 128K。每百万输入 Token 10 美元,每百万输出 Token 50 美元。 ⚠️Astra 是 OpenAI 第一个达到网络关键临界门槛的模型,官方同时承认它的思维链可监控性出现下降。能力越是向智能体方向发展,评估就不能只看答题分数,还得看真实成功率、成本和越权风险。 🗣️现在转发满屏都是 Brockman 那句 “可能有一天会被看作 AGI 的到来”。具体表现还是要等实际体验再做评判。 🔍更想聊两个技术层面的事情。 🔧 🤔我最好奇的其实是之前海外讨论的内容,Astra 存在一部分结构性改动。最早是 The Information 报道称 Astra 采用了约束循环深度,在这之后海外大量讨论围绕循环深度与循环 Transformer 展开。 📖这里做一下解释。普通 Transformer 是信息依次穿过一层层网络,循环深度是让数据在同一个模块内部反复循环多次。 📎拿 Raschka 举例的 Nanbeige4.2‑3B 来讲,它拥有 22 层堆叠结构,数据会运行两遍。效果等同于 44 层的深度,但是权重只保存 22 层的体量。节省的是存储与显存,因为模型体量没有变化,依旧是 22 层;代价是算力消耗,数据需要经过接近两倍的网络层,推理成本近乎翻倍。 🗨️但是 OpenAI 现任首席科学家 Jakub Pachocki 表示,要 “防止被混乱的报道引发一场冲向不可监控性的竞赛”。 📄本次在系统卡的可监控性章节当中出现这样一段话:“我们相当确信,思维链可控性的变化并非由架构改动差异化造成”。 ✅OpenAI 在官方材料当中主动排除了架构变化作为思维链可控性发生变化的解释。这和 “他们用架构换取可监控性” 的主流说法是相悖的。 🔐 📈从一个更长远的角度展开聊聊。虽然 OpenAI 依旧认为整体对齐效果有所变好,对齐相关指标也几乎全线大幅改善:撒谎情况减少 4 倍、蜜罐攻击归零、恶意指令服从率从 52% 下降至 0%。 ⚠️但思维链的可监控性同步出现明显下滑,并且 OpenAI 无法解释背后成因。例如模型对自身思维链内容的把控能力,Astra 在该方面出现显著增强,并且在强化学习训练阶段提升尤其明显。官方仅表示该现象并非架构带来,把相关原因归入后续研究方向。 🧪规避实验得到的几项结果: 🔎只要告知模型存在思维链监控,它就会大幅缩短思维链,部分情况下可以成功规避纯思维链监控手段。 🎭可以在评测场景下策略性隐藏自身真实能力,并且隐藏的方式能够绕开专门针对藏拙行为的监控器。 🚫关闭推理功能之后,它不需要依靠思维链就能够完成的任务范围扩大大约一个数量级,可供监控的表面范围随之收缩。 🔒不过现阶段它还无法实现隐写式思维链推理,这一点限制了风险的扩散范围。 📌补充两个细节。 ⏱️这一周的发布节奏十分密集:Claude Fable 5.1(9 月 1 日)→ Gemini 3.8 Flash(9 月 2 日)→ Meta Muse Spark 1.3(9 月 2 日)→ GPT‑6 Astra(9 月 3 日),四家机构集中在三天内完成更新。 🔌宕机事件也已经确认:9 月 3 日美国东部 Azure 区域故障,ChatGPT 报障峰值超过 3.7 万,Claude、Grok 同步出现故障,只有 Gemini 依托谷歌云得以正常运行。

总体总结

主题正文

  1. 🎯OpenAI 自己的发布重点就是:旗舰模型开始更强调操作电脑、端到端完成工作。
  2. ⚠️Astra 是 OpenAI 第一个达到网络关键临界门槛的模型,官方同时承认它的思维链可监控性出现下降。
  3. 能力越是向智能体方向发展,评估就不能只看答题分数,还得看真实成功率、成本和越权风险。
  4. 最早是 The Information 报道称 Astra 采用了约束循环深度,在这之后海外大量讨论围绕循环深度与循环 Transformer 展开。
  5. 📎拿 Raschka 举例的 Nanbeige4.2‑3B 来讲,它拥有 22 层堆叠结构,数据会运行两遍。
  6. 虽然 OpenAI 依旧认为整体对齐效果有所变好,对齐相关指标也几乎全线大幅改善:撒谎情况减少 4 倍、蜜罐攻击归零、恶意指令服从率从 52% 下降至 0%。
  7. ⏱️这一周的发布节奏十分密集:Claude Fable 5.1(9 月 1 日)→ Gemini 3.8 Flash(9 月 2 日)→ Meta Muse Spark 1.3(9 月 2 日)→ GPT‑6 Astra(9 月 3 日),四家机构集中在三天内完成更新。
  8. 🔌宕机事件也已经确认:9 月 3 日美国东部 Azure 区域故障,ChatGPT 报障峰值超过 3.7 万,Claude、Grok 同步出现故障,只有 Gemini 依托谷歌云得以正常运行。