周大 发表于 2025-2-25 14:55:50

CLaMP 3:跨模态跨语言音乐检索新突破

CLaMP 3是由多个机构合作开发的跨模态、跨语言音乐信息检索框架。它通过对比学习首次实现了乐谱、演奏信号、音频与多语言文本的联合对齐,构建了包含2.31M音乐-文本对的M4-RAG数据集,涵盖27种语言和194个国家的音乐文化。实验结果显示,CLaMP 3在多个MIR任务上取得最优性能,特别是在跨模态和跨语言检索方面表现出色,显著超越现有基线模型,并能在未见过的语言上实现高效检索。
来源:https://mp.weixin.qq.com/s/o9f8C-zEB1Vir54SdMpqZA
页: [1]
查看完整版本: CLaMP 3:跨模态跨语言音乐检索新突破