LG AI Research 发布 KMMLU-REDUX, KMMLU-PRO 数据集, 应用在 知识评估、自然语言处理 领域

LG AI Research 本次发布的数据集 KMMLU-REDUX, KMMLU-PRO, KMMLU-REDUX和KMMLU-PRO是针对韩国专家级知识评估的两个基准数据集。KMMLU-REDUX是从现有的KMMLU数据集中重建而来，由韩国国家技术资格考试的问题组成，移除了关键错误以提高可靠性。KMMLU-PRO基于韩国国家专业执照考试，反映了韩国的专业知识。这两个数据集通过严格的审查和筛选，确保了数据的准确性和可靠性，旨在评估大型语言模型在工业和专业领域的实际应用能力。

查看KMMLU-REDUX, KMMLU-PRO

Dataset card 内容： 

Files and versions 内容： 

关于 LG AI Research , LG AI研究所是韩国LG集团旗下的研究机构，专注于人工智能领域的研究与开发，致力于推动AI技术在各个行业的应用。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。