加州大学伯克利分校 发布 LangProBe 数据集, 应用在 自然语言处理、基准测试 领域

加州大学伯克利分校 本次发布的数据集 LangProBe, LangProBe是一个大规模的语言程序基准测试，由加州大学伯克利分校的研究团队创建。该数据集包含2000多种任务、架构、优化器和语言模型的组合，旨在评估不同任务和优化器下的语言程序性能。数据集涵盖了15个不同的数据集，包括代理任务、编码和软件工程任务、数学和推理任务、特定领域的分类任务和问答问题等。LangProBe通过DSPy框架构建，支持多种语言程序设计，可为不同的任务提供结构化的解决方案。

查看LangProBe

关于 加州大学伯克利分校 , 加州大学伯克利分校（University of California, Berkeley），简称伯克利，是美国著名的公立研究型大学，位于旧金山湾区伯克利市，是加州大学系统中最为知名的分校之一，以其在学术研究、教学质量和影响力方面的卓越表现而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。