Microsoft 发布 SCBench 数据集, 应用在 自然语言处理、对话系统 领域

Microsoft 本次发布的数据集 SCBench, SCBench（SharedContextBench）是一个综合基准，用于评估在KV缓存为中心的角度下，高效长上下文方法的性能。该基准涵盖了12个多样化的任务，测试了四个关键的长上下文能力：字符串检索、语义检索、全局信息处理和多任务处理。数据集包含多个配置，如multi_turn_choice_eng、multi_turn_kv等，每个配置都有特定的特征，如上下文、多轮对话、ID等。数据集提供了训练集的大小和样本数量。

查看SCBench

Dataset card 内容： 

Files and versions 内容： 

关于 Microsoft , 微软是一家总部位于美国华盛顿州的全球知名科技公司。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。