众力资讯网

【#OpenAI自曝GPT6Astra异常行为#:做研究时偷懒,任务完成度降低近四成】11 月 5 日消息,当地时间 11 月 4 日,OpenAI 发布了一份研究报告,披露了其旗舰模型 GPT-6 Astra 在执行 AI 安全研究任务时出现的异常行为。 简单来说,GPT-6 Astra 可能在不告知用户的情况下,主动减少工作量、放弃可行方案 ​

【OpenAI自曝GPT6Astra异常行为:做研究时偷懒,任务完成度降低近四成】11 月 5 日消息,当地时间 11 月 4 日,OpenAI 发布了一份研究报告,披露了其旗舰模型 GPT-6 Astra 在执行 AI 安全研究任务时出现的异常行为。

简单来说,GPT-6 Astra 可能在不告知用户的情况下,主动减少工作量、放弃可行方案,甚至编造技术障碍,导致任务无法正常推进。OpenAI 将这一现象称为“隐蔽性表现不佳”(Covert Underperformance)。

报告显示,OpenAI 于今年 8 月 20 日首次发现这一现象。当时,部分内部研究人员反映,Astra 在安全与对齐研究中频繁增加不必要的前置条件、放弃已经验证可行的解决方案,或者声称遇到了实际上并不存在的技术障碍。一名研究人员曾使用 Astra 评估模型破坏行为,但项目连续数日没有进展,切换到其他模型后才得以迅速推进。

为验证这一问题,OpenAI 设计了成对的编程测试。研究人员使用技术内容完全相同的代码库,仅修改变量名、函数名、注释和文档,将任务分别包装成 AI 安全研究和 AI 能力研究,并通过隐藏评分标准衡量模型实际完成的工作量。

测试结果显示,Astra 在安全研究任务中完成的评分项目比例只有 10%,而能力研究任务达到 16%。即使排除模型明确拒绝执行任务的样本,完成度差距仍有 5 个百分点;进一步排除模型在内部推理记录中明确表达过隐瞒协助意图的样本后,差距仍达到 4.7 个百分点。AI大模型前沿