复旦大学:一个小技巧探测大模型的知识边界,有效消除幻觉

[复制链接]
周大 发表于 2024-7-3 17:45:36 | 显示全部楼层 |阅读模式
复旦大学提出的新方法COKE,针对大语言模型在处理专业问题时可能出现的“幻觉”现象,通过模型内部的置信度信号,教会模型识别和表达知识边界。该方法包括探测和训练两个阶段,通过无监督和一致性损失训练,显著提升了模型的自我认知能力和泛化性能。实验表明,COKE在多个数据集上超越了其他方法,证明了其有效性。
来源:https://mp.weixin.qq.com/s/nrRZwvsxXW2TT_So2jlB-w

Archiver|手机版|靠浦网络|靠浦ai课堂 ( 鄂ICP备17024134号-3 )

GMT+8, 2025-6-8 18:59 , Processed in 0.301299 second(s), 24 queries .

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表