JetBrains 发布 GitGoodBench 数据集, 应用在 Git版本控制、人工智能编程 领域

JetBrains 本次发布的数据集 GitGoodBench, GitGoodBench是一个用于评估人工智能代理在Git版本控制系统任务上的性能的新基准。该数据集由三个核心Git场景组成，从Python、Java和Kotlin的开源代码库中提取。GitGoodBench提供了三个数据集：一个包含900个样本的综合评估套件，一个包含120个样本的快速原型版本，以及一个包含17469个样本的训练语料库。

查看GitGoodBench

README 内容： 

关于 JetBrains , JetBrains是一家专注于软件开发工具的捷克公司，其产品主要用于计算机编程，并提供支持多种编程语言的集成开发环境（IDE）。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。