意大利国家研究委员会信息科学与技术研究所 发布 COCO Person FaceSwap (COCO-PFS) 数据集, 应用在 人脸替换、跨模态检索 领域

意大利国家研究委员会信息科学与技术研究所 本次发布的数据集 COCO Person FaceSwap (COCO-PFS), COCO Person FaceSwap (COCO-PFS) 数据集由意大利国家研究委员会信息科学与技术研究所开发，旨在为身份感知跨模态检索任务提供大规模的训练和评估数据。该数据集基于广泛使用的COCO数据集，通过深度伪造技术将其中的人脸替换为VGGFace2中的公共人物面孔，并生成了包含500个不同实体的49,957张图像。数据集的内容包括图像及其对应的描述，描述中明确提到了替换后的人物姓名，以支持身份感知检索任务。数据集的创建过程包括图像预选、人脸替换和描述增强等步骤，确保了数据的多样性和实用性。该数据集的应用领域主要集中在个性化视频检索、大规模音视频档案管理以及文化传承等领域，旨在解决现有跨模态检索模型在处理特定人物身份和上下文信息时的局限性。

查看COCO Person FaceSwap (COCO-PFS)

README 内容： 

关于 意大利国家研究委员会信息科学与技术研究所 , 意大利国家研究委员会信息科学与技术研究所（ISTI CNR）是意大利国家研究委员会（CNR）下属的一个研究机构，专注于信息科学与技术领域的研究。该研究所致力于计算机科学、人工智能、数据科学、网络技术等领域的前沿研究，并与国内外多个学术机构和企业合作，推动科技创新和知识转移。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。