发布 MAGE 数据集, 应用在 自然语言处理、文本检测 领域

本次发布的数据集 MAGE, 该数据集是一个为训练和评估机器生成文本检测器而设计的大型语料库，涵盖了10个领域的文本内容。为了确保每个领域机器生成文本和人工撰写文本的数量相等，训练集进行了降采样处理。测试集则包含了额外的不曾见过的领域，如CNN新闻、对话摘要、IMDb评论和PubMed文献。这个大型语料库在规模上横跨多个领域，其任务是检测机器生成的文本。

查看MAGE

README 内容： 

关于 , 国庆学校是一所位于中国的教育机构，专注于提供基础教育服务。学校致力于培养学生的综合素质，注重学术与品德的全面发展。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。