哈佛大学 本次发布的数据集 合成媒体素养测试(SMeL Test), SMeL Test是一个用于评估语言模型媒体素养的基准测试,旨在测试模型在上下文中主动筛选不可靠信息的能力。该测试包括忽略可疑来源、解决矛盾和主动筛选三个任务。数据集由合成文档组成,模仿了不同可信度的来源,如百科全书条目、新闻文章、维基百科、粉丝小说等。实验结果表明,即使是先进的语言模型也经常无法正确地识别和忽略不可靠的信息来源。
关于 哈佛大学 , 哈佛大学是一所位于美国马萨诸塞州剑桥市的世界著名私立研究型大学,是常春藤盟校之一,以其在多个学术领域的卓越研究和教育质量闻名。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)