阿里巴巴集团 发布 MTU-Bench 数据集, 应用在 大型语言模型、工具使用 领域

阿里巴巴集团 本次发布的数据集 MTU-Bench, MTU-Bench是由阿里巴巴集团、中国科学院大学和滑铁卢大学联合创建的多粒度工具使用基准数据集，旨在评估大型语言模型在工具使用方面的能力。该数据集包含159,061条对话，涵盖了单轮单工具、单轮多工具、多轮单工具、多轮多工具以及分布外任务等多种场景。数据集通过转换现有高质量数据集来模拟真实世界的工具使用场景，并提出了一个名为MTU-Instruct的指令数据集以增强现有LLMs的工具使用能力。MTU-Bench的创建过程包括数据收集、工具创建、工具聚类、工具文档生成和工具使用数据合成等多个步骤。该数据集主要应用于提升大型语言模型在实际应用中的工具使用能力和解决复杂的工具调用问题。

查看MTU-Bench

关于 阿里巴巴集团 , 阿里巴巴集团是一家总部位于中国杭州的跨国科技公司，主要业务包括电子商务、云计算、数字媒体和娱乐等。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。