Allen Institute for AI 发布 DS_Critique_Bank 数据集, 应用在 AI模型评估、教育技术 领域

Allen Institute for AI 本次发布的数据集 DS_Critique_Bank, DS Critique Bank是一个包含多项选择题、相关答案和解释的数据集，由“学生模型”提供，以及由“评论模型”提供的解释的“评论”。部分实例包含人工标注。学生模型包括`gpt-4-0613`、`gpt-3.5-turbo-0613`、`Llama-2-70b-Chat`和`Llama-2-7b-Chat`，而评论模型包括`gpt-4-0613`、`DS-13B`和`DS-7B`。数据集文件包含多个jsonl文件，每个实例包含唯一ID、问题ID、数据集来源、问题文本、正确答案标签、使用的学生模型、学生模型提示、学生模型选项、学生模型预测答案、答案准确性、学生模型解释、学生模型原始输出以及评论列表。评论包含评论模型、评论模型选项、评论文本和评论元素（主要缺陷、维度、一般反馈、具体反馈和解释评分）。部分实例还包含人工标注的解释评分和评论评分。

查看DS_Critique_Bank

Dataset card 内容： 

Files and versions 内容： 

关于 Allen Institute for AI , 艾伦人工智能研究所是一家专注于AI研究和应用的高级研究机构。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。