Multimodal Art Projection 发布 GIEBench 数据集, 应用在 大型语言模型、同理心评估 领域

Multimodal Art Projection 本次发布的数据集 GIEBench, GIEBench是一个综合基准，包含11个身份维度，覆盖97个群体身份，共有999个单选题。该数据集设计用于评估大型语言模型(LLMs)在面对特定群体身份时的同理心，如性别、年龄、职业和种族等。数据集通过三种类型的提示(COT-Prompt, ID-Prompt, Raw-Prompt)来设计问题，以测试LLMs对特定身份立场的理解和同理心。

查看GIEBench

Dataset card 内容： 

Files and versions 内容： 

关于 Multimodal Art Projection , Multimodal Art Projection（MAP）是一个专注于多模态人工智能研究的开源社区。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。