霍夫应用科学大学 发布 VLM@school 数据集, 应用在 视觉语言模型、教育评估 领域

霍夫应用科学大学 本次发布的数据集 VLM@school, VLM@school 是一个用于评估视觉语言模型（VLMs）在德语环境中将视觉推理与学科特定背景知识相结合的能力的基准数据集。与广泛使用的英语基准相比，该数据集从九个领域（包括数学、历史、生物学和宗教）的真实中学课程中获取数据。基准包括超过 2,000 个开放式问题，这些问题的依据是 486 张图像，确保模型必须将视觉解释与事实推理相结合，而不是依赖于表面的文本线索。该数据集和评估协议作为严格的测试平台，旨在更好地理解和提高未来 AI 系统的视觉和语言推理能力。

查看VLM@school

关于 霍夫应用科学大学 , 霍夫应用科学大学是德国的一所公立大学，位于巴伐利亚州的霍夫市。该大学以其应用科学和技术教育而闻名，提供工程、计算机科学、商业管理等多个领域的本科和研究生课程。学校注重实践与理论的结合，与工业界有紧密的合作关系，为学生提供实习和就业机会。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。