剑桥大学 发布 ZeroBench 数据集, 应用在 视觉推理、多模态模型 领域

剑桥大学 本次发布的数据集 ZeroBench, ZeroBench是由多个研究机构和独立研究者共同创建的一个视觉推理数据集，包含100个手工制作的问题和334个子问题。这些问题涵盖了广泛的领域和视觉能力，包含自然和合成的单一及多张图像。数据集的问题是专门设计来挑战当前前沿的大型多模态模型的，要求进行多步骤的推理并精确回答。该数据集适用于评估未来模型在视觉理解方面的发展。

查看ZeroBench

关于 剑桥大学 , 剑桥大学是一所位于英国剑桥的世界著名研究型大学，成立于1209年，历史悠久，是英语世界中第二古老的大学。剑桥大学以其在各个领域的卓越研究和学术成就闻名于世。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。