苏黎世联邦理工学院发布AUTOBAXBENCH数据集,应用在代码安全、基准测试领域

苏黎世联邦理工学院本次发布的数据集AUTOBAXBENCH,AUTOBAXBENCH是由苏黎世联邦理工学院等机构联合开发的代码安全基准测试数据集，旨在评估大语言模型生成代码的安全性和功能性。该数据集包含40个全新场景任务，每个任务配备OpenAPI规范描述、功能测试用例及端到端安全漏洞利用脚本，支持14种框架和6种编程语言的跨平台验证。数据通过LLM驱动的AUTOBAXBUILDER管道自动生成，采用细粒度合理性检查确保质量，平均每个任务生成耗时不到2小时且成本低于10美元。该数据集专门用于检测SQL注入、路径遍历等常见安全漏洞，为安全关键领域（如Web应用后端）的代码生成能力评估提供可靠基准。

查看AUTOBAXBENCH

README内容：

关于苏黎世联邦理工学院,苏黎世联邦理工学院（ETH Zurich）是瑞士的一所世界顶尖理工大学，创建于1855年，以自然科学和工程技术领域的研究闻名，培养出包括爱因斯坦在内的多位诺贝尔奖得主。

关于arXiv,arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。