香港科技大学 发布 HalluLens 数据集, 应用在 自然语言处理、机器学习评估 领域

香港科技大学 本次发布的数据集 HalluLens, HalluLens是一个用于评估大型语言模型（LLM）幻觉现象的综合基准，它包括新的外在幻觉任务和现有的内在幻觉任务。数据集由香港科技大学和Meta AI合作创建，旨在解决LLM生成的内容与用户输入或训练数据不一致的问题，这种现象被称为“幻觉”。HalluLens数据集通过动态生成测试集来减少数据泄露，确保了测试的稳健性。该数据集的创建是为了解决LLM在生成内容时可能出现的事实错误和与训练数据或输入上下文不一致的问题，从而提升LLM的可信度和在生成式AI系统中的应用。

查看HalluLens

README 内容： 

关于 香港科技大学 , 香港科技大学（HKUST）是一所位于中国香港的国际化研究型大学，以其在科学研究和创新教育领域的卓越表现而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。