Ufonia Limited 本次发布的数据集 FaithfulnessQAC, UniqueQAC, ASTRID数据集由Ufonia Limited和约克大学的研究团队创建,旨在评估基于检索增强生成(RAG)的临床问答系统的性能。数据集包含来自真实患者的临床问题,涵盖了白内障手术后随访中的常见问题,并补充了急诊、临床和非临床领域的问题。FaithfulnessQAC数据集包含238条问题-答案-上下文三元组,UniqueQAC数据集包含132条三元组。数据集的创建过程包括从临床对话中提取问题,并由临床医生选择相关问题以增强数据集的多样性和覆盖范围。该数据集的应用领域主要集中在临床问答系统的自动评估,旨在解决现有评估指标在临床和对话场景中的不足,确保生成的回答在临床上是准确且有用的。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)