复旦大学 本次发布的数据集 LLMEval-Med, LLMEval-Med是一个新的基准数据集,涵盖了五个核心医疗领域,包括从真实世界电子健康记录和专家设计的临床场景中创建的2,996个问题。数据集覆盖了医疗知识、语言理解、推理、文本生成和安全伦理五个维度,并进一步细分为27个次级能力指标。LLMEval-Med采用自动评分和人工评分相结合的方法,确保评分的可靠性和实用性,旨在为医疗领域大型语言模型提供一个全面、系统、真实的评估标准。
关于 复旦大学 , 复旦大学是中国著名的高等学府,位于上海,是中国顶尖的综合性大学之一,拥有多个学科领域的优势。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)