Salesforce AI Research 发布 CLOVER 数据集, 应用在 单元测试、人工智能评估 领域

Salesforce AI Research 本次发布的数据集 CLOVER, CLOVER是一个针对单元测试用例生成的基准数据集，由Salesforce AI Research创建。该数据集基于12个Python仓库中的845个问题，涵盖了从简单的断言完成到跨多个文件特定代码块的测试用例编写等任务。数据集通过自动化的管道进行构建，包含了从数据收集到最终评估的整个过程，旨在评估模型在生成可执行单元测试用例方面的能力。

查看CLOVER

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。