苹果公司 发布 GEA-Base 数据集, 应用在 多模态学习、embodiedAI 领域

苹果公司 本次发布的数据集 GEA-Base, GEA-Base数据集是由苹果公司和乔治亚理工学院创建的，用于训练多模态大语言模型（MLLM）适应 embodied AI 领域的任务。该数据集包含超过220万条轨迹，涵盖了从人类标注者或学习策略中收集的多样化数据。数据集的创建过程包括监督微调（SFT）和在线强化学习（RL），旨在通过跨领域的数据训练，使模型能够在多种环境中执行任务，如机器人操作、游戏控制和用户界面控制。该数据集的应用领域广泛，旨在解决多模态任务中的通用代理问题，提升模型在未见任务中的泛化能力。

查看GEA-Base

关于 苹果公司 , 苹果公司是一家全球知名的科技公司，主要从事设计、开发和销售消费电子、计算机软件和在线服务。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。