arXiv 发布 arXiv Papers Dataset 数据集, 应用在 学术论文分析、自然语言处理 领域

arXiv 本次发布的数据集 arXiv Papers Dataset, 该数据集包含了从PDF文档中提取的、类似于定理环境和证明的arXiv论文，并根据它们的LaTeX源代码进行了注释。该数据集的特点是包含了定理环境和证明的地面真实标签，还设计了一个用于注解的LaTeX软件包。此外，验证数据集与训练数据集是不重叠的。该数据集的规模大约有来自3,682篇PDF文章的50万个样本，其任务是针对学术文章中的基本段落、定理段落和证明段落进行多模态分类。

查看arXiv Papers Dataset

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。