爱丁堡大学 发布 MINTQA 数据集, 应用在 多跳问答、知识密集型任务 领域

爱丁堡大学 本次发布的数据集 MINTQA, MINTQA是由爱丁堡大学、东南大学和曼彻斯特大学联合创建的多跳问答基准数据集，旨在评估大型语言模型在处理复杂、知识密集型多跳查询中的能力。数据集包含10,479个新知识问题和17,887个长尾知识问题，涵盖了从1跳到4跳的复杂推理任务。数据集通过从Wikidata和Wikipedia中提取知识三元组，并使用GPT-4o生成多跳问题，确保了问题的多样性和复杂性。MINTQA的应用领域主要集中在多跳问答任务中，旨在解决模型在处理新知识、长尾知识以及复杂推理任务时的不足。

查看MINTQA

关于 爱丁堡大学 , 爱丁堡大学是英国的一所著名公立研究型大学，位于苏格兰首府爱丁堡市，成立于1583年，是英语世界第六古老的大学。该校在多个学科领域享有盛誉，尤其在医学、文学和科学研究方面表现突出。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。