Princeton University 发布 gemma2-ultrafeedback-armorm 数据集, 应用在 人工智能模型训练、偏好反馈 领域

Princeton University 本次发布的数据集 gemma2-ultrafeedback-armorm, 该数据集为Gemma2-9B模型家族在指令设置中使用的训练数据，其基于偏好反馈。此外，该数据集还用于偏好优化模型的训练，特别是在人类反馈强化学习环境的语言模型微调背景下。

查看gemma2-ultrafeedback-armorm

Dataset card 内容： 

Files and versions 内容： 

关于 Princeton University , Princeton University 是位于美国新泽西州普林斯顿的一所私立常春藤盟校，是美国最著名的大学之一，以其在各个学科领域的卓越研究和教学质量而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。