印度孟买理工学院 发布 INDIC QA BENCHMARK 数据集, 应用在 多语言问题回答、语言模型评估 领域

印度孟买理工学院 本次发布的数据集 INDIC QA BENCHMARK, INDIC QA BENCHMARK是由印度孟买理工学院和IBM印度研究院共同创建的多语言问题回答评估基准，涵盖11种主要印度语言。该数据集包括提取式和生成式问题回答任务，涉及多个领域如地理、印度文化、新闻等。数据集的创建过程包括翻译现有数据集和使用Gemini模型生成合成数据，并通过人工验证确保质量。该数据集主要用于评估和提升大型语言模型在低资源印度语言中的问题回答能力。

查看INDIC QA BENCHMARK

关于 印度孟买理工学院 , 印度孟买理工学院（Indian Institute of Technology Bombay，简称IIT Bombay）是印度最顶尖的工程技术与科学研究机构之一，位于印度马哈拉施特拉邦的孟买市。该学院成立于1958年，是印度理工学院系统中的旗舰机构之一，以其卓越的教育和研究成果在国际上享有盛誉。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。