JetBrains Research 本次发布的数据集 ENVBENCH, ENVBENCH是一个针对自动化环境配置任务的综合基准测试。由JetBrains Research创建,该数据集包含了329个Python项目和665个基于JVM(Java、Kotlin)的项目。这些项目被精心挑选,以确保它们代表了真实的环境配置挑战。数据集通过静态分析检查Python中的缺失导入和JVM语言的编译检查来验证环境配置的正确性。该数据集旨在解决自动化软件仓库环境配置的挑战,并为模型调整提供可扩展的基准测试。
README 内容:
关于 JetBrains Research , JetBrains Research 是由 JetBrains 公司设立的研究机构,专注于计算机科学和软件开发领域的研究与技术创新。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)