贝鲁特美国大学 发布 AraSTEM 数据集, 应用在 STEM教育、多语言模型评估 领域

贝鲁特美国大学 本次发布的数据集 AraSTEM, AraSTEM是一个专门用于评估大型语言模型在阿拉伯语STEM科目中知识掌握情况的数据集，由贝鲁特美国大学的研究团队创建。该数据集包含11637个多项选择题，涵盖数学、科学、物理、生物、化学、计算机科学和医学等多个学科，难度从小学到大学水平不等。数据集的创建过程包括网页抓取、手动提取和LLM提取，确保了数据的多样性和广泛性。AraSTEM旨在解决阿拉伯语STEM领域缺乏高质量评估基准的问题，为多语言模型的性能评估提供了重要参考。

查看AraSTEM

关于 贝鲁特美国大学 , 贝鲁特美国大学位于黎巴嫩首都贝鲁特，成立于1866年，是一所享有国际声誉的私立研究型大学。该校以其高质量的教育和研究活动著称，提供广泛的本科、研究生和博士课程，涵盖医学、工程、商业、法律和人文科学等多个领域。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。