AI Singapore 发布 nlu-question_answering 数据集, 应用在 问答系统、多语言处理 领域

AI Singapore 本次发布的数据集 nlu-question_answering, SEA Question Answering数据集用于评估模型在给定段落中回答问题的能力。它包含印度尼西亚语、泰米尔语、泰语和越南语的样本，每个语言部分都有100个示例，并且有少样本示例的额外分割。数据集的特征包括ID、标签、提示（包括问题和文本）、提示模板和元数据（包括语言信息）。数据集的统计信息包括每个分割的示例数量、GPT-4o、Gemma 2和Llama 3的标记数量。数据集的来源包括TyDi QA-GoldP、IndicQA和XQuaD，每个来源都有其特定的许可证。

查看nlu-question_answering

Dataset card 内容： 

Files and versions 内容： 

关于 AI Singapore , AI Singapore是新加坡政府设立的国家人工智能项目办公室，负责推动国家的人工智能能力和创新，通过研发、人才培养和社区建设，以加速新加坡在AI领域的发展和实际应用。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。