加州大学戴维斯分校 发布 R2I-Bench 数据集, 应用在 文本到图像生成、推理能力评估 领域

加州大学戴维斯分校 本次发布的数据集 R2I-Bench, R2I-Bench是一个综合性的基准数据集，旨在评估文本到图像生成模型的推理能力。数据集涵盖了7个主要的推理类别，进一步细分为32个细粒度的子类别。R2I-Bench包含3068个精心策划的数据实例，涵盖了常识、数学、逻辑、组合、数值、因果和概念混合等核心推理类别。为了实现细粒度的评估，我们设计了R2I-Score，这是一种基于实例特定、推理导向的评估问题的QA风格指标，评估三个关键维度：文本图像对齐、推理准确性和图像质量。

查看R2I-Bench

关于 加州大学戴维斯分校 , 加州大学戴维斯分校（University of California, Davis，简称UC Davis）是一所位于美国加利福尼亚州戴维斯市的公立研究型大学，是加州大学系统下的十所分校之一，以其农业、工程、环境科学等领域的研究而著名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。