约翰霍普金斯大学 发布 PulseCheck457 数据集, 应用在 3D空间推理、物体识别 领域

约翰霍普金斯大学 本次发布的数据集 PulseCheck457, PulseCheck457是一个由约翰霍普金斯大学创建的、 unbiased和可扩展的合成数据集，旨在诊断大型多模态模型(LMMs)的6D空间推理能力。该数据集包含了457个注释完整的场景，每个场景都有多种物体，并提供了关于物体的2D和3D位置、方向等详细信息。数据集针对多对象识别、2D位置、3D位置和3D方向设计了多种问题，难度分为五个级别，从单一对象识别到复杂的6D空间关系推理任务。这些问题覆盖了从基本的2D空间关系到高级的3D位置和方向理解，旨在评估模型在处理不同复杂度的空间推理任务时的性能。

查看PulseCheck457

关于 约翰霍普金斯大学 , 约翰霍普金斯大学是美国一所著名的私立研究型大学，以其医学、公共卫生和生物科技领域的卓越研究和教育而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。