Salesforce 发布 CRMArena 数据集, 应用在 大型语言模型、任务评估 领域

Salesforce 本次发布的数据集 CRMArena, CRMArena是一个用于评估大型语言模型（LLM）代理在现实环境中执行实际工作任务能力的基准。该基准包含16个常用的工业对象，这些对象具有高度的互联性，并包含潜在变量以模拟现实数据分布。每个实例包含标准答案、任务名称、查询/任务的元数据和LLM代理应响应的查询。

查看CRMArena

Dataset card 内容： 

Files and versions 内容： 

关于 Salesforce , Salesforce是全球领先的云计算公司，专注于提供CRM软件和服务。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。