亚利桑那州立大学 发布 MMTBENCH 数据集, 应用在 多模态推理、视觉-语言模型 领域

亚利桑那州立大学 本次发布的数据集 MMTBENCH, MMTBENCH是一个用于复杂多模态表格推理的统一基准，包含500个来自现实世界的多模态表格，共计4021个问答对。该数据集涵盖了四种问题类型、五种推理类型和八种表格类型，旨在评估当前视觉-语言模型在处理多模态表格时的性能，并为未来研究提供挑战性、高质量的资源。

查看MMTBENCH

Dataset card 内容： 

Files and versions 内容： 

关于 亚利桑那州立大学 , 亚利桑那州立大学是一所位于美国亚利桑那州的公立研究型大学，以其创新的教育和研究项目而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。