发布 gemma-vs-gemma-preferences 数据集, 应用在 文本生成、偏好优化 领域

本次发布的数据集 gemma-vs-gemma-preferences, 该数据集包含使用[anakin87/gemma-2-2b-ita-sft](https://huggingface.co/anakin87/gemma-2-2b-ita-sft)生成的策略内收集的偏好数据。数据集主要用于意大利语的文本生成任务，特别是用于偏好优化（Preference Optimization）和直接偏好优化（DPO）的研究。数据集包含通过特定模型生成的响应，并使用Llama模型进行评估和排名。虽然该数据集对教学目的有价值，但不建议用于偏好调优的训练，因为训练将是离策略的（off-policy），并且数据集是由一个小型意大利语模型生成的。

查看gemma-vs-gemma-preferences

Dataset card 内容： 

Files and versions 内容： 

关于 , 国庆学校是一所位于中国的教育机构，专注于提供基础教育服务。学校致力于培养学生的综合素质，注重学术与品德的全面发展。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。