中关村实验室 发布 VisualSimpleQA 数据集, 应用在 视觉问答、自然语言处理 领域

中关村实验室 本次发布的数据集 VisualSimpleQA, VisualSimpleQA是一个用于评估大型视觉语言模型在事实寻找问答中的性能的基准数据集。该数据集由人类标注者创建，包含多模态问题、文本问题、答案以及证据。覆盖了包括科研教育、公司品牌、电影电视娱乐、政治历史等多个主题，确保了数据集的多样性。数据集通过定义明确的难度标准来指导标注过程，并从中提取出129个具有挑战性的样本集合VisualSimpleQA-hard，用于评估前沿LVLM模型的事实性。

查看VisualSimpleQA

Dataset card 内容： 

Files and versions 内容： 

关于 中关村实验室 , 中关村实验室是位于北京市中关村科技园区的高端研究机构，专注于前沿科技领域的研究与创新，涵盖人工智能、大数据、量子信息等多个方向，旨在推动中国科技创新和产业升级。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。