布朗大学 发布 Spacewalk-18 数据集, 应用在 视频理解、太空行走 领域

布朗大学 本次发布的数据集 Spacewalk-18, Spacewalk-18数据集是由布朗大学创建的，专注于多模态和长形式程序视频理解的基准。该数据集包含来自国际空间站的18个太空行走记录，总时长达到96小时，涵盖了456个动画步骤的详细标注。数据集旨在评估模型在处理长时视频和多模态信息（如视觉和语音）时的能力，特别是在未见过的环境中的泛化能力。通过两个任务：步骤识别和视频内检索，Spacewalk-18挑战了现有视频理解模型的极限，并强调了开发新方法以提高这些任务性能的必要性。

查看Spacewalk-18

关于 布朗大学 , 布朗大学是一所位于美国罗德岛州普罗维登斯的私立研究型大学，以其开放课程和强调学生自主学习的教育模式而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。