CSR框架革新多模态学习,提升模型性能与准确性

[复制链接]
周大 发表于 2024-6-20 16:15:01 | 显示全部楼层 |阅读模式
针对多模态大模型在模态对齐中出现的幻觉和感知问题,科研团队提出了Calibrated Self-Rewarding(CSR)框架。该框架利用模型自身输出构建偏好数据,结合视觉约束,提供更准确的学习路径,从而避免依赖可能存在问题的外部数据。实验表明,CSR不仅优于传统的偏好学习方法,还能在多轮迭代中提升模型性能,减少幻觉错误。
来源:https://mp.weixin.qq.com/s/yrzBdDhxv5AkSZMQzuHc8g

搜索|Archiver|手机版|靠浦网络|靠浦ai课堂 ( 鄂ICP备17024134号-3 )

GMT+8, 2025-9-21 01:18 , Processed in 0.349936 second(s), 23 queries .

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表