发布 MVP-Bench 数据集, 应用在 视觉-语言模型、图像感知评估 领域

本次发布的数据集 MVP-Bench, 该数据集名为MVP-Bench，包含了530组自然图像和经过处理的图像对，每组图像对都附带有不同感知层次的问题，旨在诊断大型视觉-语言模型（LVLMs）的视觉感知能力。MVP-Bench数据集不仅能够评估模型在高级和低级视觉感知方面的能力，而且还重点关注了处理过的内容如何影响模型的感知。该数据集的规模为530组图像对，其任务是对自然图像和经过处理的图像上大型视觉-语言模型的多层次视觉感知能力进行评估。

查看MVP-Bench

README 内容： 

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。