马里兰大学帕克分校 发布 LMSYS chatbot_arena_conversations, Tulu3 SFT mixture 数据集, 应用在 聊天机器人评估、自然语言处理 领域

马里兰大学帕克分校 本次发布的数据集 LMSYS chatbot_arena_conversations, Tulu3 SFT mixture, LMSYS chatbot_arena_conversations数据集包含由真实用户在Chatbot Arena上评估的对话，每个实例包括一个指令、两个模型生成的输出和一个人类偏好标签。Tulu3 SFT mixture数据集包含939K个示例，来自18个数据源，涵盖各种任务。本文中，作者使用了LMSYS chatbot_arena_conversations数据集来评估BLEU指标与人类偏好的一致性，并使用Tulu3 SFT mixture数据集来训练和评估BLEUBERI模型。

查看LMSYS chatbot_arena_conversations, Tulu3 SFT mixture

README 内容： 

关于 马里兰大学帕克分校 , 马里兰大学帕克分校是美国马里兰州的一所公立研究型大学，成立于1856年，是马里兰大学系统中的旗舰学校，以其在科学、工程、公共卫生等领域的优秀教育和研究成果而著名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。