不列颠哥伦比亚大学 发布 PLAICraft 数据集, 应用在 具身人工智能、多模态数据处理 领域

不列颠哥伦比亚大学 本次发布的数据集 PLAICraft, PLAICraft是一个大规模的时间对齐的多模态数据集，旨在支持具身人工智能的研究。该数据集捕捉了多人Minecraft互动中的视频、游戏输出音频、麦克风输入音频、鼠标和键盘动作等五种时间对齐模态。数据集由超过10,000名全球参与者提供，总时长超过10,000小时。PLAICraft通过毫秒级时间精度记录每个模态，使得同步的具身行为研究成为可能。数据集还包括一个评估套件，用于基准测试模型在物体识别、空间感知、语言接地和长期记忆方面的能力。PLAICraft为训练和评估在实时中流畅、有目的地行动的智能体开辟了道路，为真正具身的人工智能铺平了道路。

查看PLAICraft

关于 不列颠哥伦比亚大学 , 不列颠哥伦比亚大学是一所位于加拿大温哥华的著名公立研究型大学，以其卓越的教学和研究质量在国际上享有盛誉。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。