中国人民大学 发布 SwarmBench 数据集, 应用在 多智能体系统、自然语言处理 领域

中国人民大学 本次发布的数据集 SwarmBench, SwarmBench 是一个用于评估大型语言模型（LLMs）在多智能体系统（MAS）中协调能力的新型基准。该数据集模拟了五个基础的多智能体协调任务（追逐、同步、觅食、群聚、运输），在一个可配置的二维网格环境中进行。SwarmBench 的设计旨在评估 LLMs 在感知和通信受限条件下的协调能力，类似于自然群居生物。数据集提供了一个开放、可扩展的工具包，包括环境、提示、评估脚本和实验生成的综合数据集，旨在促进对 LLM 基于MAS协调和Embodied MAS理论基础的可重复研究。

查看SwarmBench

README 内容： 

关于 中国人民大学 , 中国人民大学是一所以人文社会科学为主，兼有部分理工学科的综合性研究型全国重点大学，是中国著名的科研教学基地。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。