资讯
OpenAI 首席科学家回应“AI 推理不透明”争议:复杂度未跳跃增长
📋总体概括
The Information 报道称 OpenAI 正测试「深度循环」技术,模型重复调用同一组网络层更新内部表征,推理过程更多留在难以阅读的内部状态中,可能使思维链监控失效,引发 AI 不可监控争议。9 月 2 日 OpenAI 首席科学家雅库布・帕乔基在 X 回应称,包括 Astra 在内的前沿模型计算图深度与 GPT-4 相差不超过两倍,架构未出现跳跃式复杂度增长,并表示将为 Astra 部署额外思维链监控,强化监控仍是当前研究核心目标。
⚡关键信息
- ▸The Information 报道 OpenAI 正测试深度循环技术,重复调用同一组网络层持续更新内部表征
- ▸该技术可能让推理过程留在难以直接阅读的内部状态,削弱思维链追踪决策路径的能力
- ▸帕乔基称前沿模型计算图深度与 GPT-4 相差不超过两倍,未出现跳跃式复杂度增长
- ▸OpenAI 表示将为 Astra 部署额外思维链监控,加强监控仍是当前研究核心目标
- ▸主流模型多基于 Transformer 线性架构,其自然语言推理输出未必准确反映内部计算
🔥犀利点评
帕乔基的回应与其说是解释,不如说是灭火。计算图深度不超过 GPT-4 两倍,根本回答不了问题——争议从来不是架构有多复杂,而是深度循环让推理从可读文本躲进不可读的内部状态,这恰恰是监控范式的失效点。他承诺部署更多思维链监控,等于承认现有监控可能不够用。行业靠「输出思维链」维持的透明度叙事本就脆弱,如今连自家首席科学家都要出来安抚,恰恰说明外面猜的未必是谣言。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 IT之家 阅读全文 →