中国科学院自动化研究所 发布 VNBench 数据集, 应用在 视频理解、模型评估 领域

中国科学院自动化研究所 本次发布的数据集 VNBench, VNBench是由中国科学院自动化研究所开发的视频理解综合基准数据集，旨在评估视频模型的细粒度理解和时空建模能力。该数据集通过合成视频生成，包含检索、排序和计数等任务，覆盖广泛的上下文长度。VNBench通过插入不相关的图像/文本针到原始视频中，生成仅基于这些针的标注，确保视频来源的多样性和查询-响应的多样性。此外，通过插入多个针，VNBench严格评估模型的时序理解能力。该数据集的应用领域包括视频理解模型的评估和改进，特别是在处理长距离依赖任务方面。

查看VNBench

README 内容： 

关于 中国科学院自动化研究所 , 中国科学院自动化研究所是中国科学院下属的研究机构，主要从事自动化科学与技术的研究，涵盖人工智能、机器人技术、模式识别等领域。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。