发布 FineFineWeb-Ko 数据集, 应用在 自然语言处理、多语言文本 领域

本次发布的数据集 FineFineWeb-Ko, 该数据集包含英语和韩语的文本数据，主要用于训练自然语言处理模型。数据集包含一个训练集，大小为902276183.057625字节，包含76935个样本。数据集的下载大小为507380064字节。数据集的语言为英语和韩语。数据集的开发过程包括从m-a-p/FineFineWeb-test获取源数据集，并使用Qwen/Qwen2-72B-Instruct模型进行翻译。数据集的许可证为Apache-2.0。研究得到了TPU Research Cloud program的支持。

查看FineFineWeb-Ko

Dataset card 内容： 

Files and versions 内容： 

关于 , 国庆学校是一所位于中国的教育机构，专注于提供基础教育服务。学校致力于培养学生的综合素质，注重学术与品德的全面发展。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。