AI Singapore 发布 nlg-machine_translation 数据集, 应用在 机器翻译、语言模型评估 领域

AI Singapore 本次发布的数据集 nlg-machine_translation, SEA机器翻译数据集用于评估大型语言模型在将文档从源语言翻译成目标语言时的连贯性和流畅性。该数据集包含英语与多种东南亚语言之间的翻译，以及印尼语、爪哇语和巽他语之间的翻译。数据集分为多种配置，包括完整和少量示例，并提供了不同模型下的示例数量、字节数和令牌数的统计数据。数据集来源于FLORES 200和NusaX，两者均采用CC BY-SA 4.0许可。README文件还提到该数据集在SEA-HELM排行榜中用于评估聊天或指令调整的大型语言模型。

查看nlg-machine_translation

Dataset card 内容： 

Files and versions 内容： 

关于 AI Singapore , AI Singapore是新加坡政府设立的国家人工智能项目办公室，负责推动国家的人工智能能力和创新，通过研发、人才培养和社区建设，以加速新加坡在AI领域的发展和实际应用。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。