伦敦大学学院 发布 HARP 数据集, 应用在 数学推理、自然语言处理 领域

伦敦大学学院 本次发布的数据集 HARP, HARP是由伦敦大学学院的研究团队创建的一个数学推理数据集，包含5409个问题，来源于美国国家数学竞赛（如A(J)HSME、AMC、AIME、USA(J)MO）。数据集大小为5409个问题，其中4780个问题有可自动验证的答案，涵盖六个难度级别。数据集的创建过程包括从AoPS Wiki上抓取问题、处理HTML、提取问题和解决方案，并进行去重和标注。HARP主要用于评估大型语言模型在数学推理任务中的表现，旨在解决现有基准测试已接近饱和的问题，提供更具挑战性的评估标准。

查看HARP

README 内容： 

关于 伦敦大学学院 , 伦敦大学学院（University College London，简称UCL）是一所位于英国伦敦的顶级公立研究型大学，以其卓越的学术研究和教育质量享誉全球。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。