消除多对多问题,清华提出大规模细粒度视频片段标注新范式VERIFIED

[复制链接]
周大 发表于 2024-10-28 14:38:31 | 显示全部楼层 |阅读模式
清华大学研究团队开发了自动化视频-文本细粒度标注系统VERIFIED,解决了现有VCMR基准数据集以粗粒度为主的问题。VERIFIED系统通过大语言模型和多模态大模型生成细粒度的静态和动态标注,并通过微调UMT提高标注可靠性。基于此系统,研究者构建了三个新的细粒度VCMR基准数据集,评估结果显示现有模型在处理细粒度信息时仍有较大差距。
来源:https://mp.weixin.qq.com/s/SZ3G9kYCPLjsNgir4jTmuw

搜索|Archiver|手机版|靠浦网络|靠浦ai课堂 ( 鄂ICP备17024134号-3 )

GMT+8, 2025-9-17 07:25 , Processed in 0.270616 second(s), 22 queries .

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表