阿联酋阿布扎比科技创新学院 本次发布的数据集 3LM, 3LM是一个针对阿拉伯语的基准测试套件,旨在填补阿拉伯语大型语言模型在STEM和代码领域评价的空白。该数据集包含三个基准测试:STEM相关的问答对、合成的STEM问题和代码生成的基准。STEM问答对来源于阿拉伯语教科书和教育练习册,合成的STEM问题基于相同来源的数据生成,代码生成基准则通过翻译两个广泛使用的代码基准构建。3LM通过严格的流程确保数据质量,旨在支持阿拉伯语LLM研究在STEM和代码领域的发展。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)