苏黎世联邦理工学院 本次发布的数据集 LEXAM, LEXAM是一个多语言法律推理基准数据集,旨在评估大型语言模型(LLMs)在法律领域的推理能力。数据集包含来自苏黎世大学法学院116门课程中的340场法律考试的4886个问题,包括2841个开放式长篇问题和2045个多项选择题。每个开放式问题都配有参考答案和明确的规范性指导,概述了预期的法律推理链。LEXAM跨越广泛的国内和国际法律领域,为评估法律推理技能提供了一个稳健的基准。
关于 苏黎世联邦理工学院 , 苏黎世联邦理工学院,简称ETH Zurich,是世界顶尖的科技教育机构,以其在科学研究和工程教育领域的卓越表现而闻名全球。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)