上海人工智能实验室 本次发布的数据集 DriveBench, DriveBench是由上海人工智能实验室等机构创建的一个基准数据集，旨在评估视觉语言模型（VLMs）在自动驾驶任务中的可靠性。该数据集包含19,200帧图像和20,498个问答对，涵盖感知、预测、规划和解释等四大主流驾驶任务，并在17种不同的设置（如干净、损坏和纯文本输入）下进行评估。数据集的内容包括多种问题类型（如多选题、开放式问题和视觉基础问题），数据来源广泛，涵盖了真实世界的自动驾驶场景。数据集的创建过程包括对现有驾驶数据集的深入分析，并通过重新采样解决了数据分布不平衡的问题。DriveBench的应用领域主要集中在自动驾驶领域，旨在揭示VLMs在视觉基础和多模态推理方面的局限性，并推动更可靠、可解释的自动驾驶决策系统的发展。
Dataset card 内容：
Files and versions 内容：
关于 上海人工智能实验室 , 上海人工智能实验室是我国人工智能领域的新型科研机构，开展战略性、原创性、前瞻性的科学研究与技术攻关，突破人工智能的重要基础理论和关键核心技术，打造“突破型、引领型、平台型”一体化的大型综合性研究基地，支撑我国人工智能产业实现跨越式发展，目标建成国际一流的人工智能实验室，成为享誉全球的人工智能原创理论和技术的策源地。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。
