爱丁堡大学 发布 LEXTIME 数据集, 应用在 法律语言处理、时间推理 领域

爱丁堡大学 本次发布的数据集 LEXTIME, LEXTIME数据集是首个专门用于评估大型语言模型在法律语言中进行事件排序能力的基准数据集。该数据集由512个来自美国联邦投诉的实例组成，每个实例都包含一组带注释的事件对及其时间关系。LEXTIME数据集旨在填补现有数据集在法律文本时间推理方面的空白，并研究LLMs如何管理法律环境中的事件排序。研究结果表明，LLMs在法律事件排序方面比在叙事文本中更为准确，并且随着输入上下文的增加和隐含事件的加入，准确率得到了提升。然而，法律语言的复杂性和嵌套子句仍然是一个挑战。该数据集为研究法律文本中的时间推理提供了一个结构化的资源，有助于评估和改进LLMs在法律语言处理方面的能力。

查看LEXTIME

README 内容： 

关于 爱丁堡大学 , 爱丁堡大学是位于英国苏格兰首府爱丁堡的一所公立研究型大学，是英语世界第六古老的大学，也是罗素集团成员之一，享有良好的学术声誉。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。