乔治亚理工学院 发布 Allo-AVA 数据集, 应用在 虚拟形象动画、多模态对话 领域

乔治亚理工学院 本次发布的数据集 Allo-AVA, Allo-AVA是由乔治亚理工学院创建的一个大规模多模态对话AI数据集，专门用于以第三人称视角的虚拟环境中的文本和音频驱动的虚拟形象手势动画。该数据集包含约1250小时的多样化视频内容，涵盖音频、转录文本和提取的关键点。数据集通过精确的时间戳映射，实现了语音与身体和面部手势的同步。Allo-AVA的多样性体现在其广泛的演讲者人口统计数据上，涵盖了多种年龄、性别和种族背景。该数据集旨在解决现有数据集在语音、面部表情和身体动作同步方面的不足，推动从虚拟现实到数字助手等应用领域的自然和上下文感知的虚拟形象动画模型的开发。

查看Allo-AVA

Dataset card 内容： 

Files and versions 内容： 

关于 乔治亚理工学院 , 乔治亚理工学院（Georgia Tech）是一所位于美国乔治亚州亚特兰大的著名公立研究型大学，以其在工程、计算机科学和科技领域的卓越教育和研究而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。