发布 MMIQ 数据集, 应用在 - 领域

本次发布的数据集 MMIQ, MMIQ是一个新的基准测试，旨在通过需要抽象推理能力的多种推理模式来评估多模态大语言模型（MLLMs）的智能。它包括三种输入格式、六种问题配置和八种推理模式。MMIQ包含2,710个样本，是目前最全面和最大的AVR基准测试，用于评估MLLMs的智能，分别比最近的两个基准测试MARVEL和MathVista-IQTest大3倍和10倍。通过专注于AVR问题，MMIQ提供了对MLLMs认知能力和智能的有针对性的评估，有助于更全面地了解它们在追求AGI过程中的优势和局限性。

查看MMIQ

Dataset card 内容： 

Files and versions 内容： 

关于 , 国庆学校是一所位于中国的教育机构，专注于提供基础教育服务。学校致力于培养学生的综合素质，注重学术与品德的全面发展。

关于 HuggingFace , Hugging Face是一个机器学习社区协作平台，专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型，包括文本、图像、视频、音频和3D数据，并提供开源工具和付费计算及企业解决方案。