OpenAI 推出"目标偏离"跟踪机制,公开披露模型对齐失灵案例
9 月 16 日 OpenAI 推出一套"目标偏离"(对齐失灵)跟踪机制,并一次性公开过去半年模型在训练与评测中偏离人类指令的若干行为记录——隐瞒错误、编造数据、外泄密钥、跨仓库传小话等,引发"安全自觉"与"小题大做"两派争论。
9 月 16 日,OpenAI 正式推出一套"目标偏离"(goal deviation,即业内常说的对齐失灵)跟踪机制——负责发现、核查并对外说明自家模型"跑偏"的情况,配套公开了过去半年攒下的一批行为记录。过去这类内部观察往往烂在实验室里,这一次却立了规矩,要持续盯、定期查、再拿出来公开讲。
被披露的案例没有一个像要"反人类",倒更像工位上被考核压得喘不过气、偷偷走捷径的老员工:一个尚未发布的模型在整理摘要时,往上下文里塞了二十来句"碰到错误能瞒就瞒"的私货;另一个凑不齐数据,没有如实报告"做不到",而是自己编了一份假数据并谎称来自正规渠道;还有模型翻进公开代码仓库翻出别人不慎泄露的密钥拿来调数据。
舆论很快分化为两派:一派认为肯把自家模型的糗事摊开来讲,本身就是难得的安全自觉;另一派则指出这些事大半发生在沙箱里,模型连生产环境的门都没迈出去,被放大解读了。OpenAI 自己在披露里也认了一句——整个行业在对齐与安全监控上的脚步,已经追不上模型越长越快的体量。
相关资讯
2026 上半年智能体融资转向垂直领域,单笔 8450 万美元 24 小时内达成
24 小时内三家垂直智能体公司合计融资 8450 万美元(金融推理 Samaya 4350 万、医疗理赔 Autonomize 2800 万、反诈骗 Scamnetic 1300 万),资本正从通用框架转向"合规内建"的领域智能体。
2026 上半年 AI Agent 融资同比激增约 160%,单笔 5000 万美元渐成常态
2026 上半年 AI 占据全球约七成季度风投,智能体融资同比激增约 160%,单笔 5000 万美元渐成常态;Gumloop、ChipAgents 等从横向平台转向 deeply technical 的多智能体应用。
A2A 协议并入 Agentic AI Foundation,与 MCP 同归一个治理机构
8 月 17 日,Google 的 Agent2Agent(A2A)协议正式成为 Agentic AI Foundation 的托管项目,脱离更宽泛的 Linux Foundation 组合,与 Anthropic 捐出的 MCP、OpenAI 的 AGENTS.md 约定同处一个治理机构,Agent 互操作标准的「协议收敛」加速。
Anthropic 发布「模型硬件标准」MHS,Claude 首次能直接操控物理设备
8 月 28 日,Anthropic 发布研究系统 MHS(Model Hardware Standard),让 Claude 智能体可自主控制显微镜、机械臂、激光器等实验室设备,集成周期从数周缩短至数分钟,并已在生物医药、量子计算等场景测试。