香港理工大学 发布 SecBench 数据集, 应用在 网络安全、大语言模型 领域

香港理工大学 本次发布的数据集 SecBench, SecBench是由香港理工大学和腾讯实验室联合创建的一个多维基准测试数据集，旨在评估大语言模型在网络安全领域的表现。该数据集包含44823个多选题和3087个简答题，涵盖了中文和英文两种语言，涉及知识保留和逻辑推理两个能力水平，以及网络安全管理的九个子领域。数据集的构建过程包括从公开来源收集高质量数据，并通过网络安全问题设计竞赛进一步扩展数据集。数据集的应用领域主要集中在网络安全，旨在解决现有基准测试在特定专家领域数据不足和问题形式单一的问题。

查看SecBench

关于 香港理工大学 , 香港理工大学是香港的一所公立综合性研究型大学，成立于1937年，提供多种本科和研究生课程，以其在工程、商业、设计等领域的教育和研究而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。