VBR: A Vision Benchmark in Rome

VBR数据集是由罗马大学计算机、控制与管理工程系创建，旨在为视觉和感知研究提供一个全面的基准。该数据集包含RGB数据、3D点云、IMU和GPS数据，覆盖了罗马的多个特征区域，总轨迹超过40公里，记录时间近4小时。数据集通过手持和车载数据收集方式，模拟各种机器人平台，如四足机器人、四旋翼飞行器和自动驾驶车辆。数据集创建过程中，使用最新设备并实施了有效的传感器校准和时间同步程序。VBR数据集的应用领域包括自主机器人和计算机视觉，特别是针对视觉测距和SLAM的研究，旨在解决环境多样性、运动模式和传感器频率等问题。The VBR Dataset was developed by the Department of Computer, Control and Management Engineering of Sapienza University of Rome, aiming to provide a comprehensive benchmark for visual and perceptual research. It contains RGB data, 3D point clouds, IMU and GPS data, covering multiple characteristic regions in Rome. The total trajectory exceeds 40 kilometers, with a total recording duration of nearly 4 hours. Data was collected via handheld and in-vehicle acquisition methods to simulate deployment on various robotic platforms, including quadruped robots, quadrotor UAVs, and autonomous vehicles. During the dataset construction process, state-of-the-art equipment was utilized, and effective sensor calibration and time synchronization procedures were implemented. The application domains of the VBR Dataset include autonomous robotics and computer vision, particularly research on visual odometry and SLAM, and it is designed to address issues such as environmental diversity, motion patterns, and sensor frequency limitations.

搜集汇总

数据集介绍

构建方式

在视觉与感知研究领域，构建高质量数据集是推动算法发展的基石。VBR数据集通过精心设计的传感器阵列，包括广基线立体相机、三维激光雷达、惯性测量单元及RTK-GPS，在罗马多样场景中采集数据。数据采集涵盖手持与车载两种模式，模拟了四足机器人、无人机及自动驾驶车辆的运动特性。传感器经过严格的硬件同步与标定，确保了时间对齐与空间坐标的一致性。地面真值生成采用创新方法，融合RTK-GPS的全局精度与激光雷达点云的局部细节，通过光束法平差优化，实现了厘米级精度的六自由度轨迹估计。

使用方法

VBR数据集遵循标准基准划分原则，提供训练集与测试集，其中训练集包含公开的地面真值，测试集则用于在线评估。研究人员可利用该数据集进行视觉里程计、SLAM及多传感器融合算法的开发与验证。评估指标包括绝对轨迹误差与相对位姿误差，支持自适应子序列长度分析，以全面衡量算法局部与全局性能。数据集配套的在线基准系统允许社区提交结果并生成排名，促进公平比较与技术进步。

背景与挑战

背景概述

随着自主机器人与计算机视觉领域的蓬勃发展，高精度、多模态感知数据集成为推动算法进步的关键基石。VBR（Vision Benchmark in Rome）数据集由罗马萨皮恩扎大学的研究团队于2024年发布，旨在为视觉里程计与同步定位与建图（SLAM）研究提供新一代基准。该数据集通过融合RGB图像、三维点云、惯性测量单元及全球定位系统数据，覆盖了从室内多楼层建筑到城市街道、高速公路乃至花园植被的多样化场景，其手持与车载相结合的采集方式模拟了四足机器人、四旋翼飞行器及自动驾驶车辆等多种平台的运动模式。核心研究问题聚焦于提升大规模环境下位姿估计的精度与鲁棒性，通过创新性地结合RTK-GPS与基于激光雷达的集束调整方法，实现了厘米级精度的六自由度地面真值，为相关领域提供了更为可靠且全面的评估标准。

当前挑战

在视觉里程计与SLAM领域，现有数据集常受限于环境单一性、传感器同步误差及地面真值精度不足等挑战。VBR数据集致力于解决这些核心问题：其构建过程需克服多传感器硬件同步的复杂性，确保激光雷达、立体相机与IMU-GPS子系统间的时间对齐误差低于毫秒级；同时，在多样化的动态场景（如城市交通、植被覆盖区域及室内外过渡环境）中采集数据时，需维持传感器校准的稳定性以避免漂移。此外，生成高精度地面真值面临大规模轨迹优化的计算负担，团队通过融合RTK-GPS的全局约束与激光雷达点云的局部配准，在长达1.5公里的轨迹上实现了±3厘米的精度验证，但这一过程仍需应对GPS信号丢失、点云数据量庞大（达数十亿点）及环境重复结构导致的匹配歧义等具体难题。

常用场景

经典使用场景

在自主机器人与计算机视觉领域，视觉里程计与同步定位与建图（SLAM）算法的评估常依赖于高质量的多传感器数据集。VBR数据集通过整合RGB图像、三维点云、惯性测量单元与全球定位系统数据，为研究者提供了一个涵盖室内外多场景的基准测试平台。其手持与车载相结合的采集方式模拟了四足机器人、四旋翼飞行器及自动驾驶车辆等多种平台的运动模式，使得算法能在多样化环境中验证鲁棒性与精度。

解决学术问题

该数据集致力于解决现有基准在环境多样性、运动模式与传感器频率等方面的局限性。通过融合RTK-GPS与激光雷达点云的束调整方法，VBR提供了厘米级精度的六自由度地面真值，显著提升了大规模场景中轨迹估计的可靠性。此举不仅弥补了传统数据集中因单纯依赖GPS-IMU融合导致的同步误差与局部精度不足，还为复杂动态环境下的SLAM算法开发提供了更为严谨的评估依据。

实际应用

在实际应用中，VBR数据集支持自动驾驶系统在城市场景中的精准导航与建图，其涵盖的街道、公园、多层建筑及高速公路等环境有助于算法应对现实世界的复杂性。同时，该数据集可用于服务机器人室内外无缝定位、无人机航迹规划以及增强现实系统的空间感知任务，为多领域机器人技术的产业化部署提供了关键数据支撑。

数据集最近研究

最新研究方向

在自主机器人与计算机视觉领域，VBR数据集凭借其多环境覆盖与高精度地面真值生成机制，正推动视觉里程计与SLAM研究向更复杂场景拓展。该数据集融合手持与车载采集模式，涵盖城市街道、多层建筑、花园及高速公路等异构环境，通过结合RTK-GPS与基于激光雷达的捆绑调整技术，实现了厘米级精度的六自由度轨迹标注。当前研究热点集中于利用其多传感器同步数据提升在动态交通、重复结构及大尺度场景下的鲁棒性，同时该数据集为跨平台机器人（如四足机器人、无人机）的泛化性能评估提供了新的基准，促进了领域内对环境多样性适应与传感器融合方法的深入探索。

相关研究论文

• VBR: A Vision Benchmark in Rome

  罗马大学计算机、控制与管理工程系“Antonio Ruberti” · 2024年