美国密歇根大学 发布 LiveXiv 数据集, 应用在 多模态模型、科学领域 领域

美国密歇根大学 本次发布的数据集 LiveXiv, LiveXiv是一个基于arXiv论文内容的多模态实时基准数据集，由美国密歇根大学统计系等机构创建。该数据集通过自动生成视觉问答对（VQA）来测试大型多模态模型（LMMs）的能力，避免了传统数据集的污染问题。数据集的内容包括从arXiv论文中提取的图表、表格等多模态数据，并通过GPT-4o等模型生成问答对。创建过程中，数据集通过结构化文档解析和多模态模型过滤，确保了数据的质量和多样性。LiveXiv主要应用于评估和提升LMMs在科学领域的性能，旨在解决现有基准数据集的污染和更新问题。

查看LiveXiv

Dataset card 内容： 

Files and versions 内容： 

关于 美国密歇根大学 , 美国密歇根大学是一所位于美国密歇根州的公立研究型大学，成立于1817年，是美国历史最悠久的公立大学之一。该校在多个学科领域享有盛誉，尤其在工程、医学、商学和法学等领域具有很高的学术地位。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。