清华大学 发布 Math Expression Contradictory Rules Dataset 数据集, 应用在 数学推理、语言模型评估 领域

清华大学 本次发布的数据集 Math Expression Contradictory Rules Dataset, 本研究构建了一个数学表达式矛盾规则数据集，由清华大学自动化系的研究人员创建，旨在通过误导性微调大型语言模型，来研究模型在解决数学问题时是否进行抽象推理。数据集包含约3000个经过特别设计的数学表达式，这些表达式违反了常规的数学运算原则，如数字重定义和运算符重定义。通过该数据集对模型进行微调，可以评估模型在数学词问题上的推理能力，以及其是否能够推广到不同的测试领域。

查看Math Expression Contradictory Rules Dataset

关于 清华大学 , 清华大学是中国的顶尖学府之一，位于北京市，以其在工程、计算机科学、材料科学等多个领域的卓越教育和研究成果而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。