天津大学 发布 HalloMTBench 数据集, 应用在 机器翻译、自然语言处理 领域

天津大学 本次发布的数据集 HalloMTBench, HalloMTBench是一个多语言、人工验证的基准数据集，旨在挑战和诊断现代大型语言模型（LLMs）的翻译幻觉。该数据集包含5,435个高质量的翻译实例，涵盖了11个从英语到其他语言的翻译方向。数据集的创建过程包括使用四种前沿LLMs生成候选翻译，通过集成LLM法官方法进行过滤，并最终由专家进行验证。该数据集可用于评估LLMs在不同语言对上的翻译能力，并揭示模型在翻译幻觉方面的弱点。

查看HalloMTBench

Dataset card 内容： 

Files and versions 内容： 

关于 天津大学 , 天津大学是位于中国天津市的一所综合性大学，是中国教育部直属的全国重点大学，也是国家‘211工程’和‘985工程’的首批建设高校之一。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。