亚当·密茨凯维奇大学 发布 LLMzSzŁ 数据集, 应用在 语言模型、多语言处理 领域

亚当·密茨凯维奇大学 本次发布的数据集 LLMzSzŁ, LLMzSzŁ数据集是首个针对波兰语的大规模语言模型基准测试，由波兰中央考试委员会提供的国家考试题目构成，涵盖了154个领域的4种考试类型，共包含近19,000道选择题。数据集的设计旨在评估多语言、英语和波兰语大语言模型在语言间知识转移的能力，并探讨模型与人类在考试通过率和准确性上的相关性。数据集的内容包括中学、高中和职业考试题目，数据来源单一且权威，确保了数据的质量和一致性。该数据集的应用领域主要集中在大语言模型的性能评估，特别是在多语言环境下的知识转移和考试题目验证方面，旨在解决大语言模型在波兰语环境下的应用问题。

查看LLMzSzŁ

Dataset card 内容： 

Files and versions 内容： 

关于 亚当·密茨凯维奇大学 , 亚当·密茨凯维奇大学（Adam Mickiewicz University）位于波兰波兹南，是波兰最古老和最大的大学之一。该大学以其广泛的人文科学、社会科学和自然科学课程而闻名，同时在人工智能和计算机科学领域也有显著的研究成果。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。