COCO Person FaceSwap (COCO-PFS) 数据集由意大利国家研究委员会信息科学与技术研究所开发,旨在为身份感知跨模态检索任务提供大规模的训练和评估数据。该数据集基于广泛使用的COCO数据集,通过深度伪造技术将其中的人脸替换为VGGFace2中的公共人物面孔,并生成了包含500个不同实体的49,957张图像。数据集的内容包括图像及其对应的描述,描述中明确提到了替换后的人物姓名,
该数据集旨在通过测试其将查询与相关图像匹配的能力来评估视觉检索器的性能。每个示例包含一个文本查询和一个关联的图像,该图像是从基础论文“Attention is All You Need”中扫描的页面。数据集的目的是促进视觉检索器的评估,其中检索模型应准确地将每个查询与其对应的页面链接起来。数据集包含3个示例,图像类型为学术论文页面,适用于测试检索模型,特别是那些专注于跨模态检索的模型。数据集的预期