Shahid Beheshti University 本次发布的数据集 FarsEval-PKBETS, FarsEval-PKBETS数据集是FarsEval项目的一个子集,专为评估波斯语大型语言模型而设计。该数据集包含4000个问题与答案,涵盖多种格式,包括选择题、简答题和描述性问题。内容涉及医学、法律、宗教、波斯语、百科知识、人类偏好、社会知识、伦理偏见、文本生成以及尊重他人权利等多个领域。数据集在创建问题时考虑了与波斯语和伊朗相关的语言、文化和地方特色,旨在为评估和比较语言模型提供一个 robust 平台。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)