加州大学伯克利分校 发布 POKERBENCH 数据集, 应用在 扑克游戏、大型语言模型 领域

加州大学伯克利分校 本次发布的数据集 POKERBENCH, POKERBENCH是由加州大学伯克利分校和佐治亚理工学院的研究团队开发的一个扑克游戏评估数据集，旨在评估大型语言模型在复杂、战略性的扑克游戏中的表现。该数据集包含11,000个关键场景，分为1,000个前翻牌和10,000个后翻牌场景，涵盖了广泛的游戏情况。数据集的创建基于游戏理论最优扑克策略，通过与专业扑克玩家合作开发，确保其多样性和代表性。POKERBENCH的应用领域主要集中在评估和提升LLMs在扑克游戏中的决策能力，旨在解决LLMs在复杂游戏场景中的表现问题，并为未来的模型优化提供基准。

查看POKERBENCH

README 内容： 

关于 加州大学伯克利分校 , 加州大学伯克利分校（University of California, Berkeley）是美国著名的公立研究型大学，位于加利福尼亚州伯克利市。作为加州大学系统的创始校区，伯克利以其卓越的学术成就和科研创新闻名于世，尤其在工程、计算机科学、物理和化学等领域具有重要影响力。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。