Zenodo 发布 MMLU Spanish Translation 数据集, 应用在 机器翻译、自然语言处理 领域

Zenodo 本次发布的数据集 MMLU Spanish Translation, 该数据集包含了使用Azure翻译器和ChatGPT将选定的MMLU问题翻译成西班牙语的内容，同时还包括了这些翻译在ChatGPT4上的运行性能结果。数据集突出了翻译错误，并比较了英语和西班牙语回答之间的性能表现，显示了西班牙语性能的下降。该任务是对大型语言模型在翻译后的基准测试上的评估。

查看MMLU Spanish Translation

关于 Zenodo , Zenodo是一个由欧洲核子研究组织（CERN）托管的研究数据共享服务。它为研究人员提供长期保存研究成果的平台，包括论文、数据集、软件和其他与科研相关的成果。用户可以免费上传和分享他们的科研数据。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。