微软亚洲研究院 发布 GSM-8k 数据集, 应用在 数学推理、自然语言处理 领域

微软亚洲研究院 本次发布的数据集 GSM-8k, GSM-8k数据集是由微软亚洲研究院创建的，用于评估大型语言模型在中学数学问题上的推理能力。该数据集包含8000个问题，这些问题是标准数学基准问题的扰动版本，旨在评估模型在面对新颖问题时的一致性推理能力。数据集通过修改原始问题中的数值来生成，以保持问题的难度不变。该数据集的应用领域是大型语言模型在数学推理任务上的性能评估，旨在解决模型在处理新颖问题时的推理错误问题。

查看GSM-8k

关于 微软亚洲研究院 , 微软亚洲研究院是微软公司在美国本土以外设立的第二家全球研发机构，成立于1998年，主要从事计算机科学和软件工程的前沿研究，拥有众多世界级的研究成果。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。