印度理工学院孟买分校 发布 IndiBias 数据集, 应用在 社会偏见评估、语言模型 领域

印度理工学院孟买分校 本次发布的数据集 IndiBias, IndiBias是一个专为评估印度社会文化背景下大型语言模型中的社会偏见而设计的综合基准数据集。该数据集由印度理工学院孟买分校创建，包含800对句子，用于测量不同人口统计学中的偏见。数据集通过过滤和翻译现有的CrowS-Pairs数据集，并利用ChatGPT和InstructGPT增强，涵盖了性别、宗教、种姓、年龄、地区、外貌和职业等七个偏见维度。此外，数据集还构建了一个资源，以解决三个交叉维度的交叉偏见。IndiBias旨在通过提供一个可靠的数据集，帮助研究人员更好地理解和减少语言模型中的偏见，特别是在印度这样的多元化社会中。

查看IndiBias

README 内容： 

关于 印度理工学院孟买分校 , 印度理工学院孟买分校是印度顶尖的工程学院之一，以其在工程、科技和管理领域的卓越教育和研究而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。