靠浦ai课堂's Archiver
版块
›
靠浦ai资讯
› 大模型「强崩溃」!Meta新作:合成数据有「剧毒」,1%即成LLM杀手
周大
发表于 2024-10-13 14:15:28
大模型「强崩溃」!Meta新作:合成数据有「剧毒」,1%即成LLM杀手
Meta、NYU等机构研究发现,即使合成数据仅占1%也可能导致LLM模型崩溃。这种现象在大规模模型中更为显著。研究通过理论分析和实验验证了这一发现,并指出数据混合策略未能有效缓解模型崩溃问题。
来源:https://mp.weixin.qq.com/s/oIAV4T_-ufTQVUrU2wX40Q
页:
[1]
查看完整版本:
大模型「强崩溃」!Meta新作:合成数据有「剧毒」,1%即成LLM杀手