中国科学院大学 发布 IFIR 数据集, 应用在 信息检索、专业领域应用 领域

中国科学院大学 本次发布的数据集 IFIR, IFIR是一个综合性的评估指令遵循信息检索能力的基准数据集，包含2426个高质量示例，涵盖金融、法律、医疗保健和科学文献四个专业领域的8个子集。每个子集针对一个或多个特定领域的检索任务，模拟现实世界中定制化指令的关键场景。IFIR通过融入不同复杂度的指令，实现对指令遵循检索能力的详细分析。该数据集由领域专家进行综合验证，确保高质量，并应用于评估信息检索系统在遵循复杂、特定领域指令方面的性能。

查看IFIR

README 内容： 

关于 中国科学院大学 , 中国科学院大学，简称“国科大”，是由中国科学院主管，以自然科学为主，兼有管理与人文学科的研究型全国重点大学。国科大依托中国科学院的丰富科研资源，为学生提供了良好的科研环境和条件。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。