Rensselaer Polytechnic Institute 发布 KGQAGen-10k 数据集, 应用在 知识图谱问答、模型评估 领域

Rensselaer Polytechnic Institute 本次发布的数据集 KGQAGen-10k, KGQAGen-10k是一个由10,787个问答对组成的数据集，由KGQAGen框架生成。该数据集旨在解决现有KGQA数据集中存在的事实错误、问题模糊或不合理等问题。KGQAGen框架利用大型的、最新的Wikidata作为知识库，并通过LLM引导的生成和符号验证来确保每个实例在事实上是正确的，并且在语言上也是合理的。该数据集可用于分析和评估KG-RAG模型的质量和多样性，以及揭示现有模型的局限性。

查看KGQAGen-10k

Dataset card 内容： 

Files and versions 内容： 

关于 Rensselaer Polytechnic Institute , Rensselaer Polytechnic Institute（伦斯勒理工学院）是一所位于美国纽约州特洛伊的私立研究型大学，是美国历史上第二所理工学院，也是美国北部最古老的理工学院。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。