微软公司 发布 MMTU 数据集, 应用在 表格数据理解、复杂任务解决 领域

微软公司 本次发布的数据集 MMTU, MMTU是一个大规模的基准数据集，包含超过3万个问题，跨越25个现实世界的表格任务。该数据集旨在全面评估模型在理解、推理和操作真实表格方面的能力，旨在解决现实世界中专业用户面临的复杂任务。数据集的问题均来源于计算机科学领域几十年的研究，重点关注专业用户面临的复杂任务。MMTU数据集的创建过程包括文献调研、任务选择、数据标准化和整理等步骤，最终形成了一个全面评估模型在表格理解和推理方面的能力的数据集。

查看MMTU

Dataset card 内容： 

Files and versions 内容： 

关于 微软公司 , 微软公司是全球领先的软件、服务和解决方案提供商，成立于1975年，总部位于美国华盛顿州，以其Windows操作系统和Office办公软件闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。