华为诺亚方舟实验室 发布 OmniEval 数据集, 应用在 多模态模型评估、自然语言处理 领域

华为诺亚方舟实验室 本次发布的数据集 OmniEval, OmniEval是一个用于评估全模态模型的数据集，包括视觉、听觉和文本输入。它包含810个音频-视觉同步视频，285个中文视频和525个英文视频。数据集包含2617个问答对，包括1412个开放式问题和1205个多项选择题，分为3个主要任务类型和12个子任务类型。OmniEval的创建旨在提供一个平台，用于评估模型构建和理解所有模态上下文的能力。

查看OmniEval

关于 华为诺亚方舟实验室 , 华为诺亚方舟实验室是华为旗下的一个研究机构，专注于基础研究和技术创新，研究领域包括人工智能、计算机视觉、自然语言处理等。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。