发布 PyrXSum 数据集, 应用在 文本摘要、评价模型 领域

本次发布的数据集 PyrXSum, 该数据集是一个新收集的英文元评估数据集，旨在评估摘要评价指标。它包含了来自XSum数据集的示例，每个示例都有手动标记的摘要内容单元（SCUs）以及SCU存在标签。该数据集为每份摘要提供了4个回应，这些回应经过筛选以确保质量，其标签通过多数投票确定。规模上，数据集包含了来自10个摘要系统的100个示例，其任务是进行摘要评估。

查看PyrXSum

README 内容： 

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。