five

RaidaR|自动驾驶数据集|恶劣天气视觉感知数据集

收藏
arXiv2021-10-26 更新2024-08-06 收录
自动驾驶
恶劣天气视觉感知
下载链接:
http://arxiv.org/abs/2104.04606v3
下载链接
链接失效反馈
资源简介:
RaidaR是一个为自动驾驶研究提供支持的丰富注释图像数据集,专注于雨天街道场景。该数据集包含迄今为止最大数量的雨天街道场景图像(58,542张),其中5,000张提供语义分割,3,658张提供对象实例分割。RaidaR图像涵盖了广泛的现实雨天引起的伪影,包括雾、水滴和道路反射,有效增强现有街道场景数据集,以改善雨天天气下的数据驱动机器感知。数据集通过结合手动分割和自动化处理,采用半自动方案进行高效标注,显著减少了标注时间。RaidaR不仅提升了现有分割算法的准确性,还通过引入一种新颖的非配对图像到图像翻译算法,直接受益于其注释数据集,为自动驾驶在恶劣天气条件下的视觉感知任务提供了强有力的数据支持。
提供机构:
西蒙弗雷泽大学
创建时间:
2021-04-10
AI搜集汇总
数据集介绍
main_image_url
构建方式
RaidaR数据集的构建采用了屋顶安装的摄像头平台,在加拿大温哥华大都会地区的晴天和雨天条件下收集RGB视频。从这些视频中提取了77,437帧图像,其中包含18,895张晴天图像和58,542张雨天图像。为了确保隐私,图像中的人脸和车牌被检测并进行了模糊处理。雨天图像涵盖了多种雨天特征,如雾、水滴和道路反射。为了高效标注大量图像,开发了一种半自动标注方案,结合了手动分割和类似于交叉验证的自动处理,显著减少了标注时间。
使用方法
RaidaR数据集可用于增强现有分割算法的准确性,特别是在雨天条件下的视觉感知任务中。通过数据增强,RaidaR可以提升现有分割算法的性能。此外,该数据集还支持一种新颖的非配对图像到图像转换算法,用于添加或移除雨天特征,直接受益于RaidaR的标注数据。研究人员可以利用RaidaR进行自动驾驶系统的训练,特别是在雨天条件下的语义和实例分割任务中,提升算法的鲁棒性和准确性。
背景与挑战
背景概述
RaidaR数据集由Simon Fraser University、Beihang University和Jilin University的研究团队于2021年提出,旨在支持自动驾驶在恶劣天气条件下的研究。该数据集包含了迄今为止最大规模的雨天街景图像(58,542张),其中5,000张图像提供了语义分割标注,3,658张图像提供了实例分割标注。RaidaR涵盖了多种雨天场景中的真实天气现象,如雾、雨滴和路面反射,能够有效补充现有的街景数据集,提升雨天条件下的机器感知能力。该数据集的发布为自动驾驶领域的研究提供了重要的数据支持,尤其是在雨天条件下的图像分割和去雨算法研究方面具有显著的影响力。
当前挑战
RaidaR数据集在构建过程中面临了多重挑战。首先,雨天条件下的图像采集和处理极为复杂,雨滴、雾气和路面反射等天气现象会导致图像质量下降,增加了标注的难度。其次,数据集的标注工作量巨大,研究团队开发了一种半自动标注方案,结合手动分割和自动化处理,显著减少了标注时间,但仍需大量人工干预以确保标注的准确性。此外,雨天场景的多样性和复杂性也对算法的鲁棒性提出了更高要求,现有的图像分割和去雨算法在雨天条件下的表现往往不尽如人意,RaidaR的引入为这些算法的改进提供了重要的数据基础。
常用场景
经典使用场景
RaidaR数据集在自动驾驶研究中具有广泛的应用,尤其是在雨天场景下的视觉感知任务中。该数据集包含了大量真实的雨天街景图像,涵盖了雨滴、雾气、道路反射等多种雨天特有的视觉干扰。研究人员可以利用这些图像来训练和测试语义分割、实例分割等算法,以提升自动驾驶系统在恶劣天气条件下的感知能力。
解决学术问题
RaidaR数据集解决了自动驾驶领域中的一个关键问题,即在雨天等恶劣天气条件下,视觉感知算法的性能下降问题。通过提供大量带有语义和实例分割标注的雨天图像,RaidaR使得研究人员能够更好地理解和处理雨天场景中的视觉干扰,从而提升算法的鲁棒性和准确性。此外,该数据集还为图像去雨、雨滴去除等任务提供了丰富的训练数据,推动了相关领域的研究进展。
实际应用
RaidaR数据集的实际应用主要集中在自动驾驶系统的开发与测试中。通过使用该数据集,自动驾驶车辆可以在雨天等复杂天气条件下进行更准确的物体检测、道路识别和场景理解。此外,RaidaR还可以用于开发图像增强算法,帮助自动驾驶系统在雨天条件下生成更清晰的视觉输入,从而提高驾驶安全性。
数据集最近研究
最新研究方向
RaidaR数据集作为目前最大的雨天街景图像数据集,为自动驾驶研究提供了丰富的雨天场景数据支持。其最新研究方向主要集中在利用其大规模标注数据提升自动驾驶视觉感知算法在恶劣天气条件下的鲁棒性。通过结合语义分割和实例分割标注,RaidaR不仅能够增强现有数据集的数据多样性,还为去雨滴、去雾等图像修复任务提供了真实场景下的训练数据。此外,RaidaR还推动了基于图像到图像转换的算法研究,特别是在雨天与晴天场景之间的无监督转换方面,展示了其在数据增强和图像修复中的潜力。这些研究方向的进展不仅提升了自动驾驶系统在复杂天气条件下的感知能力,也为计算机视觉领域提供了新的研究范式。
相关研究论文
  • 1
    RaidaR: A Rich Annotated Image Dataset of Rainy Street Scenes西蒙弗雷泽大学 · 2021年
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

Wind Turbine Data

该数据集包含风力涡轮机的运行数据,包括风速、风向、发电量等参数。数据记录了多个风力涡轮机在不同时间点的运行状态,适用于风能研究和风力发电系统的优化分析。

www.kaggle.com 收录

中国知识产权局专利数据库

该数据集包含了中国知识产权局发布的专利信息,涵盖了专利的申请、授权、转让等详细记录。数据内容包括专利号、申请人、发明人、申请日期、授权日期、专利摘要等。

www.cnipa.gov.cn 收录

DIV2K

DIV2K数据集分为: 列车数据: 从800高清高分辨率图像开始,我们获得相应的低分辨率图像,并为2、3和4个降尺度因子提供高分辨率和低分辨率图像 验证数据: 100高清晰度高分辨率图像用于生成低分辨率对应图像,低分辨率从挑战开始提供,并用于参与者从验证服务器获得在线反馈; 当挑战的最后阶段开始时,高分辨率图像将被释放。 测试数据: 100多样的图像用于生成低分辨率的相应图像; 参与者将在最终评估阶段开始时收到低分辨率图像,并在挑战结束并确定获胜者后宣布结果。

OpenDataLab 收录

Google Scholar

Google Scholar是一个学术搜索引擎,旨在检索学术文献、论文、书籍、摘要和文章等。它涵盖了广泛的学科领域,包括自然科学、社会科学、艺术和人文学科。用户可以通过关键词搜索、作者姓名、出版物名称等方式查找相关学术资源。

scholar.google.com 收录

Solar Radiation Data

该数据集包含全球多个地点的太阳辐射数据,涵盖了不同时间段和气象条件下的辐射强度。数据包括直接辐射、散射辐射和总辐射等指标,适用于太阳能资源评估和气候研究。

www.nrel.gov 收录