BITS Pilani 本次发布的数据集 Data Structures and Algorithms dataset, Object Oriented Programming dataset, 本文创建的两个数据集针对计算机科学本科教育中的两个重要课程:数据结构与算法和面向对象程序设计。每个数据集都包含了问题描述、学生提交的代码、模型解决方案、评分量表和定性反馈。这些数据集旨在为基准测试LLM在代码评估任务中的性能提供必要的元素,并 soon 将对公众开放以促进进一步研究。
查看Data Structures and Algorithms dataset, Object Oriented Programming dataset
关于 BITS Pilani , BITS Pilani是印度的一所著名私立高等教育机构,全称为Birla Institute of Technology and Science。它以提供高质量的教育和研究而闻名,在印度国内外具有较高的声誉。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)