浙江大学 发布 WORFBENCH 数据集, 应用在 大型语言模型、工作流生成 领域

浙江大学 本次发布的数据集 WORFBENCH, WORFBENCH是由浙江大学和阿里巴巴集团共同创建的一个统一的工作流生成基准数据集，旨在评估大型语言模型（LLMs）在复杂任务分解中的能力。该数据集涵盖了四个复杂场景，包括问题解决、函数调用、具身规划和开放式规划，包含18k训练样本和2146测试样本。数据集通过严格的质控和数据过滤，确保了工作流图的复杂性和准确性。WORFBENCH的应用领域主要集中在提升LLMs在下游任务中的表现，通过生成高效的工作流图，减少推理时间并提高任务完成效率。

查看WORFBENCH

关于 浙江大学 , 浙江大学是中国一所历史悠久、学科全面、科研实力雄厚的顶尖综合性大学。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。