科克大学本次发布的数据集LOBSTER (Language-Of-study Bias in ScienTific pEer Review),LOBSTER是由科克大学等机构构建的首个系统性研究NLP同行评审中语言偏见的标注数据集,包含529条从EMNLP和ACL会议评审中提取的片段,标注了负面偏见、正面偏见或无偏见。数据集通过两阶段采样策略确保覆盖多样化的语言和贡献类型,并采用多专家标注流程保证质量。该数据集旨在量化非英语论文面临的评审偏见,尤其关注不合理跨语言泛化要求等常见模式,为促进公平评审实践提供基准工具。
查看LOBSTER (Language-Of-study Bias in ScienTific pEer Review)
README内容:
关于科克大学,科克大学(University College Cork,简称UCC)是爱尔兰最古老的大学之一,成立于1845年,位于爱尔兰科克市。该校以其在科研和教育方面的卓越表现而闻名,特别是在医学、工程、商业和法律等领域。
关于arXiv,全球最大的预印本学术论文数据库,涵盖物理、数学、计算机科学等多个学科领域。





_1769672084863.jpg)