北京大学深圳研究生院 发布 GPT-ImgEval 数据集, 应用在 图像生成、自然语言处理 领域

北京大学深圳研究生院 本次发布的数据集 GPT-ImgEval, GPT-ImgEval是一个全面评估GPT-4o在图像生成方面的能力的基准，包含文本到图像生成、基于指令的图像编辑以及世界知识指导的语义合成三个核心任务。该数据集由北京大学深圳研究生院、中山大学等机构创建，旨在诊断GPT-4o在图像生成方面的性能，涵盖生成质量、编辑熟练度和世界知识信息化的语义合成等方面。数据集通过自动化脚本与GPT-4o的web接口交互，以实现大规模的可重复评估。

查看GPT-ImgEval

README 内容： 

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。