清华大学 本次发布的数据集 AIR Dataset, AIR数据集是由清华大学、哈尔滨工业大学等机构的研究人员提出的,旨在为偏好学习提供高质量的数据集。该数据集包含三个核心组件:标注、指令和响应对。标注是通过LLM模型对响应进行评分,指令是从不同的公开数据集中选择,响应对则是从评分后的三元组中构建。该数据集的设计原则是通过简化标注、优先考虑低方差指令选择和优化响应对质量来提高数据集质量,解决LLM与人类偏好对齐的问题。
关于 清华大学 , 清华大学是中国的顶尖高等学府之一,位于北京市,是中国教育部直属的全国重点大学,具有很高的国际声誉。学校拥有多个学科领域的优秀研究实力,是中国科研和人才培养的重要基地。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)