慕尼黑工业大学 发布 ClearRef and SharedRef 数据集, 应用在 指代消解、语言模型评估 领域

慕尼黑工业大学 本次发布的数据集 ClearRef and SharedRef, ClearRef and SharedRef是一个用于评估大型语言模型在对话中解决指代歧义的多语言数据集。数据集包含52个ClearRef实例和227个SharedRef实例，基于ConceptNet知识图构建，涉及8个关系，如“能够飞行”。该数据集旨在评估LLMs在多轮对话中利用常识知识解决指代歧义的能力，并研究语言简化对模型性能的影响。数据集已翻译成阿拉伯语、法语、俄语和简体中文，以支持多语言评估。

查看ClearRef and SharedRef

关于 慕尼黑工业大学 , 慕尼黑工业大学（Technische Universität München，简称TUM）是德国一所著名的工业大学，位于巴伐利亚州的首府慕尼黑，是德国最古老的工业大学之一，也是国际知名的研究型大学。该校在工程、计算机科学、物理等领域享有很高的声誉。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。