圣母大学 发布 LabSafety Bench 数据集, 应用在 实验室安全、语言模型评估 领域

圣母大学 本次发布的数据集 LabSafety Bench, LabSafety Bench是由圣母大学和IBM研究团队创建的一个实验室安全评估框架，旨在评估大型语言模型（LLMs）在实验室安全环境中的可靠性。数据集包含765个多选题，涵盖了实验室安全的四个主要领域：危险物质、应急响应、责任与合规、设备与材料处理。这些问题由人类专家验证，确保其准确性和清晰性。数据集的创建过程包括提出新的实验室安全分类法、收集相关材料、生成问题并由GPT-4o协助优化选项，最后由专家审核。该数据集主要用于评估LLMs在实验室安全决策中的应用，旨在提高实验室环境中的安全性和可靠性。

查看LabSafety Bench

关于 圣母大学 , 圣母大学（University of Notre Dame）是一所位于美国印第安纳州的私立研究型大学，成立于1842年。该校以其卓越的学术声誉、强大的研究实力和著名的天主教传统而闻名。圣母大学在多个学科领域都表现出色，尤其在工程、商学和法学等领域具有很高的排名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。