清华大学 发布 LOGICGAME 数据集, 应用在 规则推理、模型评估 领域

清华大学 本次发布的数据集 LOGICGAME, LOGICGAME数据集由智谱AI和清华大学联合开发，专注于评估大型语言模型在规则基础推理方面的能力。该数据集包含一系列设计精巧的规则游戏，要求模型理解和应用预定义规则来解决问题。数据集构建过程中，确保所有问题在互联网上不可获取，以防止数据泄露。LOGICGAME适用于评估模型在执行和规划场景中的规则推理能力，旨在解决复杂逻辑推理和多步骤规划的问题。

查看LOGICGAME

关于 清华大学 , 清华大学是中国顶尖的综合性大学之一，位于北京市，以其卓越的教育质量和科研实力闻名于世。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。