USVD (Urban Surveillance Video Dataset)

USVD是由中国科学技术大学电磁空间信息重点实验室和中国科学院创建的大型城市监控视频数据集，旨在支持多目标跟踪和行为分析研究。该数据集包含16个场景，覆盖7种典型的户外环境，如街道、交叉路口、医院入口等。数据集包含超过20万帧视频，标注了超过370万个对象边界框和约7100条轨迹。创建过程中，所有边界框均经过人工标注和检查，确保了数据的质量。USVD数据集适用于评估城市拥挤场景下的多目标跟踪和异常行为检测算法，为公共安全和城市管理提供技术支持。USVD is a large-scale urban surveillance video dataset developed by the Key Laboratory of Electromagnetic Space Information, University of Science and Technology of China and the Chinese Academy of Sciences, aiming to support research on multi-object tracking and behavior analysis. This dataset includes 16 scenarios covering 7 typical outdoor environments such as streets, intersections, hospital entrances and other similar places. It contains over 200,000 video frames, with more than 3.7 million annotated object bounding boxes and approximately 7,100 trajectories. During the dataset construction process, all bounding boxes were manually annotated and verified to ensure data quality. The USVD dataset is suitable for evaluating multi-object tracking and abnormal behavior detection algorithms in crowded urban scenes, providing technical support for public safety and urban management.

搜集汇总

数据集介绍

构建方式

USVD数据集的构建始于54个监控摄像头在公共场所捕获的3888小时视频，总数据量超过5TB。基于密度、多样性、遮挡、变形、视角和运动等因素，从中选取了16个具有挑战性的场景进行标注。数据集包含7种目标类别，包括行人、骑行者、汽车、货车、公共汽车、三轮车和卡车。所有目标均手动标注，包括位置、大小、对象类别、遮挡和轨迹信息。数据集分为训练集和测试集，每个序列的统计数据如表2所示。

特点

USVD数据集具有以下特点：真实：所有数据均来自真实公共场所的监控场景，直接应用于计算机视觉算法的评价。复杂：数据集包含7个典型场景的16个不同拥挤场景，具有频繁的遮挡、变形、各种视角和多样化的目标。大规模：数据集包含超过20万帧已标注视频和超过370万个对象边界框，以及约7100条轨迹。标注良好：所有边界框均经过手动标注和检查，确保了标注的一致性和准确性。

使用方法

USVD数据集可用于多个领域的算法评估和应用，包括目标检测、多目标跟踪和异常行为检测。用户可以根据需要选择训练集或测试集进行算法训练和评估。数据集的标注信息包括目标的位置、大小、类别、遮挡和轨迹，可用于训练和评估各种算法的性能和鲁棒性。此外，数据集还包含异常行为检测的示例，可用于评估异常检测算法的性能。

背景与挑战

背景概述

随着视频监控技术在公共安全和城市管理中的广泛应用，多目标跟踪和行为分析已成为视频分析领域的核心研究内容。USVD（Urban Surveillance Video Dataset）数据集正是在这一背景下由中国科学院电磁空间信息重点实验室的研究人员创建，旨在为多目标跟踪和异常行为分析提供大规模、高注释的监控视频数据集。该数据集由16个场景组成，涵盖了7种典型的户外环境，包括街道、十字路口、医院入口、学校大门、公园、步行街和公共广场。数据集中包含了超过20万帧视频，共计超过370万个目标边界框和约7100条轨迹，是目前为止规模最大、最全面的监控视频数据集之一。

当前挑战

尽管USVD数据集提供了丰富的场景和大量标注数据，但其构建过程中也面临着诸多挑战。首先，数据集收集过程中需要考虑场景的多样性、复杂性和拥挤程度，以确保数据集能够真实反映现实应用中的情况。其次，数据集标注过程中需要保证标注的准确性和一致性，同时还需要处理目标遮挡、变形、视角变化等问题。此外，数据集的应用也面临着挑战，例如如何利用该数据集评估现有算法的性能和鲁棒性，以及如何进一步探索在城市拥挤场景下多目标跟踪和异常行为分析的算法改进。

常用场景

经典使用场景

USVD数据集作为迄今为止最大和最全面的都市监控视频数据集，其经典使用场景包括多目标跟踪和行为分析。在多目标跟踪方面，该数据集提供了超过200k的视频帧和3.7百万个物体边界框，为评估和改进多目标跟踪算法提供了宝贵的数据资源。在行为分析方面，USVD数据集包含7种典型场景和16个拥挤场景，涵盖了各种复杂的行为模式，有助于研究者开发更加准确和鲁棒的行为分析模型。

解决学术问题

USVD数据集解决了现有监控视频数据集在评估多目标跟踪和行为分析算法时的不足。现有数据集往往规模较小，场景相对简单，无法准确反映现实世界中的复杂情况。USVD数据集提供了大规模、多样化的场景，以及详尽的注释信息，为评估和改进多目标跟踪和行为分析算法提供了更真实、更具挑战性的数据基础。

衍生相关工作

USVD数据集的发布推动了相关领域的研究进展。基于USVD数据集，研究者们开发了一系列多目标跟踪和行为分析算法，并在实际应用中取得了显著成果。例如，基于USVD数据集的跟踪算法在拥挤场景中表现出更高的准确性和鲁棒性，而基于USVD数据集的行为分析算法能够准确识别和预测各种异常行为。此外，USVD数据集还衍生出一系列新的研究方向，如群体分析、异常行为定位等，为相关领域的研究提供了新的思路和方法。