UG2+ Challenge Track 2

UG2+ Challenge Track 2数据集由北京大学王选计算机研究所的研究团队创建，旨在提升恶劣天气和低光环境下计算机视觉任务的理解能力。该数据集包含三个子集，分别针对雾、雨和低光条件下的物体或面部检测。每个子集均包含在真实世界中收集的图像，并带有标注的物体/面部信息，以支持对增强方法的全面检查和公平比较。此数据集的创建是为了激发对低级视觉技术如何惠及各种场景下高级自动视觉识别的全面讨论和探索。The UG2+ Challenge Track 2 dataset was developed by the research team from the Wangxuan Institute of Computer Technology, Peking University, aiming to enhance the understanding of computer vision tasks under adverse weather and low-light conditions. This dataset comprises three subsets, which target object or face detection under foggy, rainy and low-light conditions respectively. Each subset contains real-world captured images with annotated object/face information, to support comprehensive evaluation and fair comparison of enhancement methods. This dataset was created to inspire comprehensive discussions and explorations on how low-level vision technologies can benefit high-level automatic visual recognition across various scenarios.

搜集汇总

数据集介绍

构建方式

在恶劣视觉环境下的目标检测研究领域，UG2+挑战赛第二赛道数据集的构建体现了严谨的科学方法论。该数据集通过三个子挑战分别采集真实世界的雾霾、低光照和雨滴遮挡场景图像。雾霾子集采用RESIDE RTTS的4322张标注图像和4807张未标注图像；低光照人脸检测子集包含自主构建的DARK FACE数据集，涵盖10000张标注图像和9000张未标注图像，并辅以789组配对光照图像；雨滴遮挡子集则提供1010组真实雨滴图像配对数据与2495张测试图像。所有数据均从交通监控和街景采集设备获取，标注工作采用专业工具进行边界框标注，确保了数据来源的真实性与标注的精确性。

特点

该数据集的核心特征在于其多维度的挑战性与学术前瞻性。首先，它全面覆盖了雾霾、低光照和雨滴三种复杂退化类型，每种退化均源自真实物理场景而非合成模拟，极大提升了模型的泛化需求。其次，数据集创新性地支持全监督、半监督及零样本学习范式，特别是雨滴子挑战采用无训练数据的零样本设置，推动了无监督学习方法的发展。再者，数据集的难度系数显著，最优模型在雾霾和低光照任务中的mAP均低于65%，雨滴任务中甚至无参赛者超越基线，充分揭示了当前技术瓶颈。最后，数据集兼具机器视觉任务评估与人类视觉质量评价的双重功能，为跨领域研究提供了宝贵资源。

使用方法

该数据集的使用遵循严格的评估协议与分层实验设计。在模型训练阶段，研究者可采用端到端检测、级联增强-检测或联合优化等架构，并充分利用其提供的配对与非配对数据探索半监督学习策略。评估阶段以平均精度均值（mAP）为核心指标，采用0.5的交并比阈值进行目标匹配，同时支持更高阈值的辅助评估。对于雨滴子挑战，需特别注意其零样本特性，鼓励开发域自适应或无需配对数据的创新方法。数据集已建立标准化测试集划分，所有外部数据或预训练模型的使用均需在提交时明确声明，确保实验的可复现性与公平性。

背景与挑战

背景概述

在计算机视觉领域，恶劣环境下的图像理解一直是制约智能系统实际应用的关键瓶颈。UG2+ Challenge Track 2 数据集于2019年由北京大学、德克萨斯农工大学、圣母大学等机构的学者联合创建，旨在系统性地探索低层视觉增强技术（如去雾、去雨、低光增强）对高层视觉任务（如目标检测、人脸检测）的实际增益效应。该数据集作为IEEE CVPR 2019竞赛的重要组成部分，首次大规模整合了真实场景中由雾霾、降雨及低光照条件导致的图像退化数据，并提供了精细的目标标注，填补了以往研究多集中于合成数据或独立任务的空白，为跨层次视觉联合优化研究提供了至关重要的基准平台。

当前挑战

该数据集所应对的核心挑战在于恶劣能见度环境下鲁棒视觉感知的达成。具体而言，首先，领域问题层面，现有视觉系统在清晰环境下训练，面对真实复杂退化（如非线性雾霾、动态雨滴、极端低光）时性能急剧下降，模型泛化能力严重不足。其次，构建过程中，数据采集需在真实多变气象与光照条件下进行，标注工作因图像质量低下而异常困难；同时，为支持全监督、半监督及零样本学习等多种范式，数据配对与划分设计极具复杂性，还需确保合成与真实数据间的域差异最小化，以贴近实际应用场景。

常用场景

经典使用场景

在计算机视觉领域，恶劣天气和低光照条件下的图像理解一直是极具挑战性的研究方向。UG2+ Challenge Track 2数据集通过整合真实世界中的雾霾、雨滴和低光环境图像，为研究者提供了一个系统评估目标检测与面部识别算法鲁棒性的平台。该数据集最经典的使用场景在于推动低层视觉增强技术与高层视觉识别任务之间的联合优化研究，尤其是在自动驾驶、城市监控等实际应用中，算法需在复杂退化条件下保持稳定性能。

实际应用

在实际应用层面，UG2+数据集直接服务于智能交通系统、安防监控和自动驾驶等关键领域。例如，在雾霾或暴雨天气中，车载视觉系统需准确识别道路上的车辆、行人及交通标志；城市监控摄像头在低光照环境下仍需可靠完成人脸检测与身份识别。该数据集通过模拟真实退化条件，帮助开发者训练和验证算法在极端环境下的鲁棒性，从而提升视觉系统在复杂现实场景中的部署可行性与安全性。

衍生相关工作

该数据集的发布催生了一系列围绕恶劣环境下视觉理解的创新研究。例如，优胜团队HRI DET在Sub-challenge 2.1中采用基于未标注数据的半监督学习策略，通过重构损失优化特征提取器；CAS-Newcastle团队则在Sub-challenge 2.2中探索了低光增强与检测模型的级联架构。这些工作不仅推动了多任务联合训练、域自适应等方向的发展，还激发了后续对零样本学习、无监督退化建模等前沿问题的深入研究，为计算机视觉在开放环境中的应用提供了新的方法论启示。