斯坦福大学 发布 REALM-Bench 数据集, 应用在 多智能体系统、实时规划 领域

斯坦福大学 本次发布的数据集 REALM-Bench, REALM-Bench是一个针对LLMs和Multi-Agent Systems的实时规划问题的综合评估框架。该数据集由斯坦福大学提供，包含11个从基础到高度复杂的设计问题，涵盖了多智能体协调、智能体间的依赖关系以及动态环境干扰等关键方面。每个问题可以根据并行规划线程数、依赖关系复杂度以及意外中断的频率和影响三个维度进行扩展。该数据集旨在推动更健壮、适应性更强的AI规划系统在现实世界应用中的发展。

查看REALM-Bench

README 内容： 

关于 斯坦福大学 , 斯坦福大学是一所位于美国加州的世界顶尖私立研究型大学，以其在科技、工程、商业和法律等领域的卓越教学和研究而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。