周大 发表于 2024-7-9 15:49:20

港科大发布新REC基准,挑战多模态大模型理解能力

当前多模态大模型在目标检测上的应用广泛,但针对复杂自然语言描述的指称表达理解任务仍具挑战。港科大发布新基准Ref-L4,以解决现有基准存在的错误率高和描述过于简短的问题。Ref-L4具有更大规模、更丰富多样性,对大模型的REC能力提出更高要求。评估显示,即使强大如GPT-4V的模型在此任务上表现欠佳,表明REC领域仍有大量提升空间。
来源:https://mp.weixin.qq.com/s/pUlZIWYZB-zIhU4FnmU0ag
页: [1]
查看完整版本: 港科大发布新REC基准,挑战多模态大模型理解能力