上海人工智能实验室 发布 PM4Bench 数据集, 应用在 多模态语言处理、视觉语言模型 领域

上海人工智能实验室 本次发布的数据集 PM4Bench, PM4Bench是由上海人工智能实验室等机构提出的一个并行多语言多模态多任务评估基准，包含10种语言的平行语料库，旨在对大型视觉语言模型进行公平准确的跨语言比较。该数据集涵盖了视觉设置，其中文本和查询嵌入在图像中，要求模型同时具备‘看’、‘读’和‘思考’的能力，符合现实世界的应用场景。PM4Bench还包含了安全性评估，填补了现有多语言评估基准的关键空白。

查看PM4Bench

关于 上海人工智能实验室 , 上海人工智能实验室是我国人工智能领域的新型科研机构，开展战略性、原创性、前瞻性的科学研究与技术攻关，突破人工智能的重要基础理论和关键核心技术，打造“突破型、引领型、平台型”一体化的大型综合性研究基地，支撑我国人工智能产业实现跨越式发展，目标建成国际一流的人工智能实验室，成为享誉全球的人工智能原创理论和技术的策源地。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。