港科大发布新REC基准，挑战多模态大模型理解能力

当前多模态大模型在目标检测上的应用广泛，但针对复杂自然语言描述的指称表达理解任务仍具挑战。港科大发布新基准Ref-L4，以解决现有基准存在的错误率高和描述过于简短的问题。Ref-L4具有更大规模、更丰富多样性，对大模型的REC能力提出更高要求。评估显示，即使强大如GPT-4V的模型在此任务上表现欠佳，表明REC领域仍有大量提升空间。
来源：https://mp.weixin.qq.com/s/pUlZIWYZB-zIhU4FnmU0ag