香港中文大学 发布 MR-BEN 数据集, 应用在 元推理、人工智能 领域

香港中文大学 本次发布的数据集 MR-BEN, MR-BEN是由香港中文大学等机构创建的综合性元推理基准，包含5975个问题，覆盖数学、生物、物理、编程和逻辑等多个学科。数据集通过挑战模型定位和分析自动生成推理步骤中的潜在错误，来评估模型的元推理技能。创建过程中，专家精心设计问题并进行标注，确保数据质量。MR-BEN的应用领域广泛，旨在解决现有评估方法在推理能力评估上的不足，推动AI推理框架的发展。

查看MR-BEN

关于 香港中文大学 , 香港中文大学是一所位于香港的著名综合性研究型大学，以其优秀的教学质量和科研实力享誉国际。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。