汉堡大学 发布 GIMMICK 数据集, 应用在 多模态数据、文化知识评估 领域

汉堡大学 本次发布的数据集 GIMMICK, GIMMICK是一个包含三个新数据集的广泛多模态基准，涵盖728个独特的文化事件或方面，分布在144个国家的六个全球宏观区域。这些数据集旨在评估31个最先进的模型在多个任务上的文化知识，涉及图像、文本和视频等多种输入模态，以评估大型视觉语言模型在处理非西方文化背景任务时的性能和偏见。

查看GIMMICK

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。