坎皮纳斯州立大学 发布 Timely Events Benchmark (TiEBe) 数据集, 应用在 大语言模型、全球事件 领域

坎皮纳斯州立大学 本次发布的数据集 Timely Events Benchmark (TiEBe), TiEBe数据集由坎皮纳斯州立大学和Maritaca AI联合创建，旨在评估大语言模型对全球和地区重要事件的知识掌握情况。该数据集包含11,236个问答对，数据来源于维基百科的回顾页面，涵盖了2015年至2024年间全球及多个国家（如美国、巴西、法国等）的重要事件。数据集通过自动化工具从新闻文档中生成问答对，确保数据的多样性和时效性。TiEBe主要用于评估大语言模型在持续学习和地理知识差异方面的表现，旨在解决模型在处理全球事务时的不平衡问题。

查看Timely Events Benchmark (TiEBe)

关于 坎皮纳斯州立大学 , 坎皮纳斯州立大学（Universidade Estadual de Campinas，简称UNICAMP）是巴西圣保罗州的一所公立研究型大学，成立于1966年。该校以其在科学、工程和医学领域的研究而闻名，是拉丁美洲最重要的高等教育机构之一。UNICAMP在多个国际大学排名中名列前茅，并拥有多个研究中心和实验室，致力于推动科技创新和学术发展。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。