Shanghai Jiao Tong University 本次发布的数据集 AIRQA-REAL, AIRQA-REAL是一个针对学术论文的问答数据集,包含553个样本和18个实例特定的评估指标。该数据集由上海交通大学人工智能教育部重点实验室、苏州语言计算江苏省重点实验室和苏州AISpeech有限公司共同创建。数据集内容主要来源于2023年和2024年发表的AI论文,旨在解决学术论文中关键细节的提取问题。数据集创建过程中,研究人员采用了多视图分块和模式化解析的方法,将半结构化的PDF内容组织成关系数据库和向量存储,从而实现了LLM代理的迭代收集上下文直到生成答案的能力。
关于 Shanghai Jiao Tong University , 上海交通大学是中国著名的高等学府之一,位于中国上海。该校在多个学科领域都有深厚的研究实力,是国内外公认的一流大学。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)