Knowledge Engineering Group (KEG) & Data Mining at Tsinghua University 发布 ComplexFuncBench 数据集, 应用在 函数调用、模型评估 领域

Knowledge Engineering Group (KEG) & Data Mining at Tsinghua University 本次发布的数据集 ComplexFuncBench, Complex Function Calling Benchmark (`ComplexFuncBench`) 是一个专门用于复杂函数调用评估的数据集。该数据集包含1000个复杂函数调用样本，涵盖了五个方面：(1) 单轮多步函数调用；(2) 用户提供约束的函数调用；(3) 需要从隐式信息中推理参数值的函数调用；(4) 参数值超过500个token的函数调用；(5) 128k长上下文的函数调用。数据集还提供了不同模型在该数据集上的表现排行榜，以及数据集的统计信息，包括不同类别的样本数量和平均步骤数、调用数。

查看ComplexFuncBench

Dataset card 内容： 

Files and versions 内容： 

关于 Knowledge Engineering Group (KEG) & Data Mining at Tsinghua University , 清华大学知识工程研究室（KEG）和数据挖掘小组（THUDM）专注于大型语言模型研究与应用。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。