技术创新研究所 发布 LiveRAG Benchmark 数据集, 应用在 信息检索、自然语言处理 领域

技术创新研究所 本次发布的数据集 LiveRAG Benchmark, LiveRAG基准数据集由技术创新研究所研发，专为评估检索增强生成系统而设计的高质量问答语料库。该数据集包含895个合成问答对，源自SIGIR 2025 LiveRAG挑战赛，数据源采用FineWeb-10BT网络文档库，并利用DataMorgana工具通过多阶段流程生成，涵盖事实型、比较型等八类问题范畴。本数据集核心应用于RAG系统效能评估，通过集成难度系数与区分度参数，为人工智能问答系统的性能校准与渐进式训练提供标准化测评框架。

查看LiveRAG Benchmark

Dataset card 内容： 

Files and versions 内容： 

关于 技术创新研究所 , 技术创新研究所位于阿联酋阿布扎比的马斯达尔城，是一个专注于先进技术研究和开发的研究机构。该研究所致力于推动科技创新，特别是在人工智能、机器人技术、材料科学和可再生能源等领域。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。