IBM Research 发布 ToRR 数据集, 应用在 表格推理、自然语言处理 领域

IBM Research 本次发布的数据集 ToRR, ToRR是一个涵盖不同领域和类型的表格推理能力的广泛覆盖的表格基准，包括10个数据集，这些数据集涵盖了从知识提取到文本推理和数值推理不同层次的能力要求。数据集由IBM Research等机构收集，旨在评估模型在表格任务上的性能和鲁棒性。ToRR的设计考虑了模型在不同表格格式下的表现，提供了关于模型在处理表格数据时的鲁棒性测量，对于选择和评估语言模型在表格理解任务上的能力具有重要价值。

查看ToRR

关于 IBM Research , IBM Research是IBM公司的研发部门，致力于科技创新和商业解决方案的研究与开发。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。