中央佛罗里达大学 发布 SB-Bench 数据集, 应用在 多模态模型评估、偏见分析 领域

中央佛罗里达大学 本次发布的数据集 SB-Bench, SB-Bench是一个用于评估大型多模态模型中刻板印象偏见的全面基准，由中央佛罗里达大学的研究团队开发。该数据集包含7500个真实图像的三元组，涵盖了年龄、残疾状况、性别认同、国籍、种族/ ethnicity、宗教、性取向、外貌和社会经济地位等九个多样化的领域，及其60个子类别。这些图像与情境信息和多项选择题相结合，为评估多模态模型中的视觉刻板印象提供了精确和细致的手段。

查看SB-Bench

关于 中央佛罗里达大学 , 中央佛罗里达大学是美国佛罗里达州奥兰多市的一所公立研究型大学，成立于1963年。它是美国最大的大学之一，以其在工程、计算机科学、光学和光子学等领域的研究而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。