AI at Meta 发布 ExploreToM 数据集, 应用在 理论思维推理、大型语言模型测试 领域

AI at Meta 本次发布的数据集 ExploreToM, ExploreToM是首个允许大规模生成多样化且具有挑战性的理论思维推理数据的框架。该框架利用A*搜索在自定义的领域特定语言上操作，生成复杂的故事结构和多样化的、合理的场景，以对大型语言模型的极限进行压力测试。数据集包括针对特定模型（如Llama-3.1-70B-Instruct）生成的对抗性数据样本，以及用于训练和评估的多种故事结构。数据字段包括与问题相关的属性（qprop）、与故事相关的属性（sprop）和搜索参数（param）。

查看ExploreToM

Dataset card 内容： 

Files and versions 内容： 

关于 AI at Meta , AI at Meta是Meta公司旗下的人工智能研究团队，致力于推动机器学习技术的前沿发展。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。