西安交通大学 发布 MCP-RADAR 数据集, 应用在 模型评估、问题解决 领域

西安交通大学 本次发布的数据集 MCP-RADAR, MCP-RADAR是一个用于评估大型语言模型在模型上下文协议（MCP）框架下工具使用能力的全面基准数据集。该数据集涵盖了软件工程、数学推理和一般问题解决等三个核心领域，共包含300个任务。数据集旨在通过五个维度来衡量模型能力：答案准确性、工具选择效率、计算资源效率、参数构造准确性和执行速度。MCP-RADAR的构建过程经过严格的任务设计和验证，确保了数据集的高质量和可靠性。

查看MCP-RADAR

关于 西安交通大学 , 西安交通大学是中国的一所综合性全国重点大学，位于陕西省西安市，是中国教育部直属的全国重点大学，也是国家首批“211工程”和“985工程”重点建设的高校之一。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。