Cohere For AI 发布 Global-MMLU 数据集, 应用在 多语言问答、跨文化研究 领域

Cohere For AI 本次发布的数据集 Global-MMLU, 该数据集包含多种语言的问答任务数据，涵盖了不同语言和文化背景。每个样本包含问题、选项、答案、所需知识、文化敏感性标签等信息。数据集分为开发集（dev）和测试集（test），并提供了每种语言配置的样本数量和数据大小。

查看Global-MMLU

Dataset card 内容： 

Files and versions 内容： 

关于 Cohere For AI , Cohere For AI是一个非营利性研究实验室，致力于解决复杂的机器学习问题，通过开放合作推动机器学习研究的实质性进展，并支持通过不同媒介进行科学交流的多种视角，促进负责任的创新。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。