Salesforce AI Research 发布 HERB 数据集, 应用在 多源数据分析、企业级搜索技术 领域

Salesforce AI Research 本次发布的数据集 HERB, HERB（Heterogeneous Enterprise RAG Benchmark）是一个新的基准数据集，用于评估深度搜索，这是一种需要跨多种相关源进行源感知、多跳推理的检索增强生成（RAG）。数据集包含文档、会议记录、Slack消息、GitHub和URL等不同结构的数据，通常包含人与人之间的互动。数据集是通过模拟业务流程创建的，包括产品规划、开发和客户支持等阶段，生成具有现实噪声和保证有真实答案的多跳问题。数据集包含39,190个企业工件，支持细粒度的评估长上下文LLM和RAG系统。

查看HERB

Dataset card 内容： 

Files and versions 内容： 

关于 Salesforce AI Research , Salesforce AI Research是Salesforce公司下属的人工智能研究部门，致力于推动机器学习和深度学习领域的科学研究，并将这些研究成果应用于Salesforce的产品中，以提升客户服务和企业自动化水平。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。