Capital One 发布 T1 数据集, 应用在 自然语言处理、对话系统 领域

Capital One 本次发布的数据集 T1, T1数据集是Capital One研究团队创建的，旨在评估大型语言模型（LLM）在多轮对话中进行工具使用和复杂规划任务的能力。数据集包含了13.5k个对话，覆盖了九个不同的领域，包括航班、酒店、餐厅、景点等，模拟了真实世界中的多轮对话场景。数据集的设计使得LLM能够进行工具调用、参数提取、信息寻求等任务，并支持动态规划，如决定是否重新计算或复用缓存结果。T1数据集的创建过程包括从维基百科收集实体和元数据，通过人工标注和知识库生成对话模板，并进行数据标注和质量保证。该数据集对于研究多轮对话中的工具使用和规划任务具有重要意义，并为评估开源语言模型性能提供了基准。

查看T1

关于 Capital One , 第一资本是一家美国的银行和金融服务公司，以提供信用卡和银行服务为主，同时也在金融服务领域进行技术创新。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。