新加坡国立大学 发布 ULT (UnLeakedTestbench) 数据集, 应用在 软件测试、机器学习模型评估 领域

新加坡国立大学 本次发布的数据集 ULT (UnLeakedTestbench), ULT (UnLeakedTestbench) 是一个专门为从真实世界的 Python 函数中生成函数级别的单元测试而设计的新基准。ULT 通过多阶段审查过程构建，确保高循环复杂度并减少测试用例污染。ULT 共有 3,909 个精心选择的函数级别任务，为评估大型语言模型 (LLM) 的测试生成能力提供了更真实和更具挑战性的评估。此外，还提供了一个名为 PLT (PreLeakedTestbench) 的配对基准，其中包含泄漏的测试，旨在控制分析测试生成中的记忆与推理。

查看ULT (UnLeakedTestbench)

README 内容： 

关于 新加坡国立大学 , 新加坡国立大学是一所位于新加坡的公立研究型大学，以其卓越的学术研究和教育质量在国际上享有盛誉。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。