Pegasi AI 发布 FRED dataset 数据集, 应用在 金融文本分析、自然语言处理 领域

Pegasi AI 本次发布的数据集 FRED dataset, FRED数据集是一个合成的数据集，由Pegasi AI创建，旨在检测和编辑大型语言模型生成的金融领域事实错误内容。该数据集基于FinQA和TATQA两个基准数据集，通过插入标记错误来构建。数据集包含8K和36K两个版本，每个版本都包含金融领域的问答任务，要求对文本上下文进行多步数值推理。数据集的创建过程包括错误插入、过滤和校正、以及训练数据准备。FRED数据集的应用领域是金融文本生成，旨在解决大型语言模型中存在的幻觉问题。

查看FRED dataset

README 内容： 

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。