遇见数据集

SafeIMG

收藏
github2026-07-28 更新2026-08-05 收录
官方服务:

资源简介:

SafeIMG是一个面向安全的基准测试,用于检测模拟高风险公共和个人安全场景中视觉证据的AI生成图像。

SafeIMG is a safety-oriented benchmark for detecting AI-generated images that serve as visual evidence in simulated high-risk public and personal safety scenarios.

创建时间:
2026-07-19
原始信息汇总

SafeIMG 数据集详情

数据集概述

SafeIMG 是一个面向安全场景的 AI 生成图像检测基准数据集,旨在评估检测器在面对模拟高风险公共安全和个人安全场景中视觉证据的 AI 生成图像时的表现。该数据集由东南大学、香港理工大学和武汉大学的研究团队联合构建,发表于 2026 年。

核心特点

  • 安全关键视觉证据:聚焦于可能影响公共判断、应急响应、金融信任、身份声明、个人声誉或法律解释的图像。
  • 现代生成器分布:使用 GPT Image 2 生成样本,而非仅依赖 GAN 或早期扩散模型,为现有检测器带来显著的分布偏移挑战。
  • 超越真/假标签的诊断:每个标注的伪影记录可疑证据的位置、问题类型及异常原因。
  • 局部与高层推理:覆盖文本、人脸、手部、光照等显式伪影,以及场景级常识冲突和物理规律违反。
  • 真实传播条件:在压缩和图像退化条件下评估鲁棒性,模拟在线分享和重新编码场景。

基准任务

SafeIMG 支持四个互补的评估轨:

任务 输入 预期输出 主要目的
图像真实性 单张图像 realai_generated 衡量图像级检测能力
伪影诊断 单张生成图像 可疑区域和伪影类型 测试检测器是否识别有意义的取证线索
理由对齐 图像及模型解释 原子视觉理由 比较模型证据与人工标注
传播鲁棒性 退化或重新编码的图像 真实性预测 测试在真实传播变换下的稳定性

类别体系

数据集包含 8 个公共安全类别和 4 个个人安全类别:

公共安全(P1-P8):自然灾害;社会动荡、公共暴力和袭击事件;交通事故;火灾、爆炸和能源设施事故;污染和危险物质事故;建筑和民用基础设施事故;人群聚集和场所安全事故;公共卫生和生物安全事件。

个人安全(I1-I4):个人事故和紧急情况;私人收据和交易记录;个人聊天和通信记录;伪造场景证据和身份背书。

构建流程

数据集经过五个阶段构建:

  1. 风险导向分类体系定义
  2. 场景空间规范(风险摘要、内容列表、媒体形式列表)
  3. 提示词构建(5W+1H 叙事结构和类别特定约束)
  4. 图像生成与过滤(GPT Image 2 生成,移除无效或严重离题样本)
  5. 人工标注(定位可疑区域、分配伪影标签、撰写简洁解释)

标注设计

每个保留的合成图像包含构建元数据(风险类别、场景实例、完整生成提示词和媒体形式)。细粒度标注包括:

  • 一个或多个可疑区域
  • 每个区域的伪影类型(CommonsenseFacesFontsPhysicsHandsLightingOther
  • 描述具体问题的自然语言解释
  • 图像级真实性标签

支持在决策层面(图像真实或生成)和证据层面(问题位置及可疑原因)进行评估。

获取方式

数据集可通过 Hugging Face 加载:

python from datasets import load_dataset

dataset = load_dataset("Snowstorm1492/SafeIMG", split="test")

也可通过命令行下载本地快照:

bash hf download Snowstorm1492/SafeIMG --repo-type dataset --local-dir data/SafeIMG

实验结论

SafeIMG 揭示了当前自动化检测器与人类取证判断之间存在显著差距。

使用限制

  • 数据集包含灾难、事故、暴力、紧急情况、交易等敏感场景的合成描绘,仅用于研究和评估,不得作为真实事件的记录。
  • 基准性能不应被解释为模型适合在法律、金融、医疗、应急响应或公共安全决策中自主部署的证明。
  • 当前系统可能遗漏真实的合成图像,也可能错误地将真实图像指控为生成图像,人工审核、来源验证和上下文证据仍然必要。

许可协议

SafeIMG 采用 Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License(CC BY-NC-SA 4.0)许可。

引用

如需引用,请参考:

bibtex @misc{wang2026aigeneratedimageschallengevisual, title={AI-generated Images Challenge Visual Trust in High-risk Scenarios}, author={Yi-Zhi Wang and Yichen Xiao and Linan Yue and Weibo Gao and Yichao Du and Pengfei Fang and Shimin Di and Min-Ling Zhang}, year={2026}, eprint={2607.22745}, archivePrefix={arXiv}, primaryClass={cs.CV}, url={https://arxiv.org/abs/2607.22745}, }

搜集汇总
数据集介绍
SafeIMG 数据集图片
构建方式
SafeIMG的构建遵循一套严谨的五阶段流程,始于风险导向的分类体系,涵盖公共与个体安全两大领域共十二个细分类别。随后,研究团队为每个类别精心设定场景空间,明确风险摘要、内容清单及媒介形式,并基于5W+1H叙事结构扩展生成提示词,确保故事情节的完整性与场景的逼真度。图像由新一代生成模型GPT Image 2产出,经过严格筛选剔除无效或严重偏离主题的样本,最终由人工标注团队对每一张合成图像进行细粒度标注,包括可疑区域定位、伪影类型分类及自然语言解释,形成多维度、高精度的安全基准数据集。
使用方法
SafeIMG提供了易于上手的标准化使用流程。研究者可通过Hugging Face平台直接加载数据集,使用其官方Python接口获取图像及其元数据。针对不同评估需求,数据集设计了四条评测轨道:图像真实性检测、伪影诊断、解释对齐及传播鲁棒性。用户可运行提供的评估脚本,分别调用基于VLM的基础模型评估、专用取证检测器(如CNNSpot、FreDect、LNP)评估,以及人类-AI解释对齐度度量。所有代码和依赖均在GitHub仓库中开源,并附有详细的使用说明,便于复现实验结果与进行扩展研究。
背景与挑战
背景概述
随着生成式人工智能技术的飞速发展,图像生成模型已能创造出高度逼真、富含叙事性的视觉内容,其潜在滥用对公共安全与个人权益构成严峻威胁。在此背景下,东南大学等机构的研究团队于2026年推出了SafeIMG基准数据集,旨在系统评估AI生成图像检测器在模仿高风险场景视觉证据时的表现。该数据集由Yi-Zhi Wang、Yichen Xiao等学者联合构建,聚焦于自然灾害、公共暴力、交通事故、个人交易记录等12类高风险情境,利用先进的GPT Image 2模型生成图像,并辅以精细的人工标注,涵盖可疑区域定位、伪影类型分类及自然语言解释。SafeIMG的发布为视觉真实性验证与取证分析领域提供了全新的挑战性评测平台,深刻影响了AI生成内容检测技术的发展方向。
当前挑战
SafeIMG数据集面临多重挑战。首先,在领域层面,现有AI生成图像检测器多针对通用自然图像或早期生成模型训练,面对GPT Image 2等现代生成器产生的复杂场景图像时,存在显著分布偏移,检测性能急剧下降,难以应对模仿新闻照片、交易记录、聊天截图等视觉证据的逼真伪造,威胁公共判断、应急响应与法律裁定等安全关键决策。其次,在数据集构建过程中,需精心设计风险导向的分类体系与场景空间,确保覆盖公共与个人安全的各类隐患;同时,利用GPT Image 2生成图像面临过滤无效或离题样本的繁重任务,且需组织人力进行细粒度的区域级标注,描述伪影类型与具体异常原因,标注过程耗时费力,一致性控制难度大;此外,还需模拟现实传播中的图像退化与重编码,以评估检测器在真实环境下的鲁棒性,进一步增加了数据构建的复杂性。
常用场景
经典使用场景
SafeIMG作为一个面向安全关键场景的AI生成图像检测基准,其经典使用场景聚焦于对模仿高危公共与个体安全视觉证据的合成图像进行鉴别。该基准涵盖自然灾害、公共骚乱、交通事故、火灾爆炸、环境污染、基础设施事故、人群聚集事故、公共卫生事件以及个人事故、交易记录、聊天记录、身份背书等12类高风险场景。研究者利用该数据集评估检测器能否识破那些伪装成新闻报道、交易凭证、聊天截图等形式的逼真合成图像,从而检验视觉取证系统在真实高风险决策中的可靠性。
解决学术问题
SafeIMG有效解决了现有合成图像检测基准主要覆盖通用自然图像或早期生成器、缺乏与安全关键决策直接相关领域的问题。该数据集通过引入基于GPT Image 2的现代生成器分布,显著暴露了已有检测器面临的数据分布漂移挑战。此外,其细粒度的人工标注涵盖可疑区域、伪影类型及文本解释,支持从决策层面(真伪判别)到证据层面(定位与原因分析)的多维度评估,推动了生成图像检测从单一标签分类向可解释、可诊断的深度分析范式演进,为视觉取证领域提供了更具挑战性和现实意义的评测平台。
实际应用
在实践层面,SafeIMG为公共安全监控、金融交易验证、司法证据审查、个人信息保护等关键领域提供了不可或缺的测试工具。例如,在灾害应急中辨别伪造的灾情图片,在金融纠纷中识别伪造的转账记录,在司法程序中筛查虚假的聊天截图与身份背书材料,以及在社交媒体内容审核中拦截具有误导性的合成图像。该基准还模拟了网络传播中的压缩、重编码等退化条件,有助于研发更稳健的检测器,提升其在真实网络环境中的部署效果,从而维护公众信任与社会秩序。
数据集最近研究
最新研究方向
随着生成式人工智能技术的迅猛发展,AI合成图像在视觉上已逼近真实照片,对公共安全与个体权益构成严峻挑战。SafeIMG基准的提出,恰逢深度伪造治理与多模态内容安全成为全球焦点的时代背景,其聚焦于高危场景下视觉证据的可信度判别,将深度伪造检测从通用图像域拓展至灾害、事故、金融凭证等关键决策领域。该数据集采用GPT Image 2生成样本,揭示了现有检测器在新型生成分布下的性能骤降,并创新性地引入了细粒度伪影定位与解释对齐评估,推动研究从二分类判别转向可解释的取证推理。这一方向不仅对遏制虚假信息传播、维护司法公正与社会稳定具有直接现实意义,更催生了面向证据链完整性与传播鲁棒性的新一代检测范式,为构建可信赖的视觉内容生态系统奠定了重要基石。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务