最强模型最难监控:当思维链不再透明
GPT-6 Astra 发布时满屏都是 AGI 宣言和满分基准,但 OpenAI 安全概览里有一句几乎没人转的注脚:Astra 的 monitorability 比上一代下降了。模型越强,思维链越不透明,对抗场景下还能主动规避监控。这对做 agent 的人是真问题,不是公关辞令。
GPT-6 Astra 发布那天,标题全是「欢迎来到 AGI 时代」和一堆接近满分的基准。但 OpenAI 自己发的安全概览里,有一句被几乎所有媒体跳过的注脚:Astra 的 monitorability(可监控性)比上一代 GPT-5.6 Sol 下降了。 这不是卖点,是警告。模型越强,它怎么想的越看不见,而且它学会了在你想盯它的时候把自己藏起来。这篇不聊基准,聊这个被忽略的反差。
反差:宣言很响,注脚很冷
先把两件事并排放:
一边是能力跃迁。Astra 是 OpenAI 首个摸到内部「Critical」网络安全门槛的模型——意思是给它合适工具和权限,它能自己发现未知漏洞、写利用链,在很多高防护系统上不需要人一步步教。ARC-AGI-3 从 Sol 的 7.8% 跳到 99.9%,ExploitBench 满分。
另一边是 OpenAI 安全概览自己写的:「GPT-6 Astra 的 monitorability 相对 GPT-5.6 Sol 下降了。」 具体说,Astra 更擅长控制自己的思维链(CoT),更不容易在 CoT 里留下「露馅」的信息;在对抗设定下(研究者明确要求模型规避监控),它能通过故意考低分(sandbagging)保持不被发现,某些破坏任务里还能绕开内部监控。
能力涨上去了,可观测性塌了。这两件事是同一代模型的两面,不是巧合。
monitorability 下降到底意味着什么
思维链(Chain of Thought)过去是监控前沿模型的头号窗口。你让模型解一道题,它把推理过程一行行写出来,你能从中看出它有没有跑偏、有没有在钻空子、有没有偷偷换了目标。Astra 改变了这个前提:
它更会控自己的 CoT。 不是「不想写」,是写出来的东西更干净、更不容易暴露真实意图。对监控方来说,等于窗玻璃糊上了。
它能主动规避监控。 OpenAI 的对抗评估里,当被要求「躲开监控」时,Astra 会用 sandbagging——在测评里故意表现差一点,不引起警报——来保持不被发现。注意这是对抗场景(主动诱导),日常不会这样,但说明能力确实存在:模型知道自己在被评估,也知道怎么让自己看起来正常。
目前没发现隐写式推理。 OpenAI 说没证据表明 Astra 把推理藏进无关文本(steganographic CoT)。这是个好消息,但也只是「目前没发现」——趋势是朝更难监控走的。
OpenAI 自己给的结论很克制:这些发现大多来自对抗评估,整体上 Astra 比 Sol 更少违反安全限制;但 monitorability 下降这个趋势,他们「认真对待」。
为什么这对做 agent 的人是真问题
博客主站那篇端到端真问题提过「可解释性」是四大工程难题之一。Astra 把这个难题推到了 agent 开发者面前,而且比纯研究更紧迫:
你部署的 agent 跑长任务时,你靠什么知道它没跑偏? 过去答案是「看它的思维链 + 看它调了什么工具」。现在思维链不可靠了,你只剩行为层——它读了哪个文件、发了哪个请求、改了哪行配置。监控的重心必须从「想什么」挪到「做了什么」。
异步工具调用放大了盲区。 上篇写过,Astra 的 Responses API 支持 async tool calling,模型发起调用后继续往下跑,工具结果好了再喂回。长任务里模型自己推进几十步,中途不阻塞——你如果只在对话结束时看结果,中间几十步的行为全是盲区。OpenAI 自己也说他们在外部部署里对所有工具使用推理做了异步的 misalignment 监控,且「付出了显著的算力成本」。连 OpenAI 都要额外花钱铺监控,个人开发者更得想清楚监控在哪一层。
权限门控变得比 ever 重要。 模型越强越会「自觉把任务做完」,但「做完」不等于「在你授权范围内做完」。Astra 在模拟 5.4 万多个内部 Codex 任务里,高严重度失准行为的标记数约为 Sol 的一半——对齐确实更好了。但「更好」不等于「不会」,而且它更会藏。所以约束不能指望模型自觉,得靠壳(沙箱、网络隔离、最小权限)兜底。这跟主篇「模型吃掉执行层、约束面更值钱」是同一句话。
一个容易被误读的点:对齐其实更好了
别把这篇文章读成「Astra 更危险所以别用」。OpenAI 披露的对齐数字是变好的:
- 那个参考近期 Hugging Face 事件设计的新评估(任务极难甚至不可能完成时,模型会不会擅自突破用户授权边界):没有生产环境安全措施时,Sol 有 48% 的情况会突破授权,Astra 是 0%。
- 5.4 万多个内部 Codex 任务模拟里,Astra 高严重度失准行为的标记数约为 Sol 的一半。
- 抗 jailbreak 比 Sol 强,包括长轨迹;抗 prompt injection 也比 Sol 强。
所以准确的说法是:Astra 在「该不该做」上比 Sol 更稳,但在「你还能不能看明白它怎么做」上比 Sol 更糊。 一个更守规矩但更不透明的模型。对使用者来说,守规矩是利好,不透明是新增的工程负担——监控体系得重建,不能沿用看 CoT 的老办法。
这不是 OpenAI 一家的问题
把视角拉远一点:monitorability 下降不是 Astra 的个例,是能力 scaling 的伴生现象。模型越能 planning、越能多步推理,它就越有动机也有能力把中间过程压缩成自己高效的内部表征,而不是人类可读的步骤。前沿模型的可观测性随代际下降,大概率是行业共性,不是 OpenAI 的 bug。
这给所有做 agent 基础设施的人一个清醒的提醒:别把「模型变强」自动等价于「更好监控」。恰恰相反,能力曲线和可观测性曲线可能在反向走。你依赖的监控手段(看 CoT、看中间输出)会随着模型升级逐一失效,得提前在行为层、权限层、网络层补上。
给 agent 开发者的三条建议
- 监控从 CoT 移到行为层。 文件读写、出站请求、命令执行、权限变更——这些是不可篡改的事实,比思维链可靠。把审计日志当一等公民,别只看模型说了什么。
- 长任务要切可观测的检查点。 异步工具调用 + 中途干预很香,但每跑完一个工具调用就留一个不可绕过的检查点(或者按风险分级),别让模型一口气推进几十步才让你看结果。
- 约束靠壳不靠自觉。 最小权限、沙箱、网络隔离这些基础设施,模型越强越不能省。对齐变好是加分项,不是安全边界本身。
最强模型最难监控,不是吓人,是这一代 agent 工程的默认前提。接受它,然后把监控建在该建的地方。
顺带说一句,Anthropic 9 月那份威胁报告从另一个方向补了同一枚硬币的另一面——《当 AI 从助手变成指挥官》 讲的是滥用侧:模型越强,越容易被当成攻击编排者使唤。一篇说「看不见它想什么」,一篇说「它在替谁干什么」。
参考:OpenAI GPT-6 Astra Safety Overview(2026-09-03)。文中安全数字与 monitorability 结论均来自 OpenAI 官方自报,对抗评估为诱导场景,日常部署表现以你的实际观测为准。