Appraise Evaluation Framework 发布 Newstest2019 Annotation Data 数据集, 应用在 机器翻译、自然语言处理 领域

Appraise Evaluation Framework 本次发布的数据集 Newstest2019 Annotation Data, 该数据集包含了两个可控长度的翻译模型生成的机器翻译输出的注释。这些翻译涵盖了两个方向：英语到中文和中文到英语，并且每句话都被翻译成了不同的长度，分别是参考长度的80%和50%。注释基于对翻译输出的逐段直接评估，这为详细评估可控长度的翻译模型提供了可能。该数据集规模为6480条注释，涵盖了270个句子、两种语言、两个模型、两种长度和三位标注者的组合。其任务是机器翻译评估。

查看Newstest2019 Annotation Data

README 内容： 

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。