瑞士苏黎世联邦理工学院 本次发布的数据集 长格式问答数据集, 该数据集旨在评估FRANQ和其他UQ技术在RAG上的表现。数据集包含76个问题,每个问题都有相应的答案,其中包含从Llama 3B和Falcon 3B模型输出中提取的1,782个断言。数据集通过自动标注和手动验证相结合的方式创建,并标注了断言的真实性和忠实性。该数据集可用于训练和测试UQ方法,以评估长格式问答中RAG生成的回答的真实性。
关于 瑞士苏黎世联邦理工学院 , 瑞士苏黎世联邦理工学院(ETH Zurich)是瑞士的两所联邦理工学院之一,位于瑞士苏黎世,是享誉世界的科研和教学机构,在多个学科领域都处于领先地位。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)