如何高效桥接视觉和语言,字节&中大提出全新多模态大模型连接器ParGo
字节团队与中山大学合作提出的ParGo模型,通过创新的全局-局部投影器设计,解决了传统视觉-语言连接器难以平衡全局信息与局部细节的问题。该模型在多项权威基准测试中表现出色,成功入选AAAI 2025。实验表明,ParGo不仅能在控制token数量的同时精确捕捉图像细节,还展现了良好的泛化能力,为多模态大语言模型的发展提供了新的解决方案。来源:https://mp.weixin.qq.com/s/TjV0buH_lrk03HJq_NljsQ
页:
[1]