LeetCode 发布 LeetCode Evaluation Dataset 数据集, 应用在 编程自动化、性能评估 领域

LeetCode 本次发布的数据集 LeetCode Evaluation Dataset, 该数据集是从一个知名的LeetCode Swift解决方案程序库构建而成的，包含了358个算法编程问题，旨在用于评估代码补全任务。此外，该数据集还被用来衡量Copilot for Xcode生成代码的质量，通过与基准真相的对比来评估其在AI辅助编程工具代码完成和评估任务中的性能表现。该数据集的规模涵盖了358个编程问题，专门针对代码补全以及AI辅助编程工具的性能评估任务。

查看LeetCode Evaluation Dataset

README 内容： 

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。