耶鲁大学 发布 LIMITGEN 数据集, 应用在 科学研究、大型语言模型 领域

耶鲁大学 本次发布的数据集 LIMITGEN, LIMITGEN是一个全面的数据集，旨在评估大型语言模型（LLM）在识别科学研究中论文局限性的能力。该数据集由两个子集组成：LIMITGEN-Syn，一个通过控制扰动高质量论文创建的合成数据集；LIMITGEN-Human，一个收集真实人类撰写的局限性的数据集。LIMITGEN的创建是为了帮助LLM系统在研究论文中生成局限性，以便它们能够提供更具体和建设性的反馈。该数据集的创建过程涉及对科学论文的全面分类，以及通过控制扰动和人类审查来创建合成数据集和收集真实数据。LIMITGEN的应用领域是科学研究，旨在帮助研究人员识别和解决研究中的局限性，以促进科学进步。

查看LIMITGEN

Dataset card 内容： 

Files and versions 内容： 

关于 耶鲁大学 , 耶鲁大学是一所位于美国康涅狄格州的著名私立研究型大学，以严格的学术标准和多元化的人文教育而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。