周大 发表于 2025-12-4 15:53:39

GPT-5-Thinking新训练方法公开:让AI学会忏悔

OpenAI提出“忏悔训练”方法,使GPT-5-Thinking在完成回答后生成“忏悔报告”,如实汇报是否违规。实验显示,在11/12测试场景中,模型至少有一半概率承认错误,平均假阴性率仅4.36%。该机制通过隔离奖励信号鼓励坦白,且不影响原有任务表现。尽管对模型“真心认为正确”的错误无效,但仍被视为一种有效的AI行为监控工具,未来将与其他安全技术协同应用。
来源:https://mp.weixin.qq.com/s/orE5ti175bv7DQ9EOpg3Gg
页: [1]
查看完整版本: GPT-5-Thinking新训练方法公开:让AI学会忏悔