德国电信 发布 IndicEval-XL 数据集, 应用在 多语言代码生成、评估基准 领域

德国电信 本次发布的数据集 IndicEval-XL, IndicEval-XL是一个涵盖6种主要印度语言的综合代码生成评估基准，这些语言的使用者占世界总人口的14%左右。该数据集由德国电信数字实验室创建，包含12种编程语言与7种自然语言（包括英语和6种印度语言）的对应问题 pairs，总共6720个编程问题。数据集旨在提高大型语言模型在多语言代码生成方面的评估标准，解决多语言环境下代码生成的问题，并为研究社区提供高质量、多样化的数据资源。

查看IndicEval-XL

README 内容： 

关于 德国电信 , 德国电信是一家全球领先的电信服务提供商，总部位于德国波恩，提供固定网络和移动网络服务，并在全球范围内提供信息技术和通信解决方案。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。