阿姆斯特丹大学 发布 RACQUET 数据集, 应用在 多模态语言模型、指代歧义 领域

阿姆斯特丹大学 本次发布的数据集 RACQUET, RACQUET数据集由阿姆斯特丹大学逻辑、语言与计算研究所创建，旨在研究视觉语言模型中的指代歧义问题。该数据集包含740对手动筛选的图像和英语歧义指代问题，分为RACQUET-GENERAL和RACQUET-BIAS两个子集。RACQUET-GENERAL使用MSCOCO的真实世界图像，而RACQUET-BIAS则使用Dall-E 3生成的图像，旨在触发基于社会偏见的响应。数据集不包含标准答案，而是收集了多种人类响应，用于评估模型的输出。该数据集主要用于测试和改进多模态语言模型在处理歧义和避免偏见方面的能力。

查看RACQUET

README 内容： 

关于 阿姆斯特丹大学 , 阿姆斯特丹大学是荷兰的一所著名研究型大学，成立于1632年，提供广泛的学科和研究领域，包括人文、社会科学、自然科学和医学等。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。