华为诺亚方舟实验室 发布 CFinBench 数据集, 应用在 金融领域、语言模型评估 领域

华为诺亚方舟实验室 本次发布的数据集 CFinBench, CFinBench是由华为诺亚方舟实验室等机构精心打造的中文金融领域大型语言模型评估基准，包含99,100条问题，覆盖43个细分领域，涉及单选、多选和判断题三种题型。数据集内容源自网络公开的模拟考试，经过多轮数据清洗和人工验证，确保了数据的高质量和广泛适用性。该数据集旨在全面评估模型在金融知识、资格认证、实际操作及法律法规等方面的能力，为金融领域的大型语言模型研究和应用提供了一个高标准、全面的测试平台。

查看CFinBench

关于 华为诺亚方舟实验室 , 华为诺亚方舟实验室是华为公司旗下的一个研究机构，专注于人工智能和大数据技术的研发与应用。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。