five

HSOD-BIT|高光谱图像数据集|目标检测数据集

收藏
github2024-05-31 收录
高光谱图像
目标检测
下载链接:
https://github.com/q2479036243/DMSSN
下载链接
链接失效反馈
资源简介:
HSOD-BIT数据集是北京理工大学提出的首个大规模、具有挑战性的高光谱显著性目标检测数据集。该数据集包含319幅高光谱图像及对应的伪彩色图像和像素级标注,这些图像涵盖了北京理工大学及其周边地区在多种天气条件下的校园环境、城市街道、自然风景等多种场景。在数据集的构建过程中,充分考虑了前背景相似、复杂光照条件等挑战,以增强数据集对显著性目标检测算法的全面评估能力。HSOD-BIT数据集的建立为高光谱显著性目标检测技术的研究和发展提供了重要的数据支持。

The HSOD-BIT dataset, proposed by Beijing Institute of Technology, is the first large-scale and challenging hyperspectral salient object detection dataset. It comprises 319 hyperspectral images along with corresponding pseudo-color images and pixel-level annotations. These images cover a variety of scenes including campus environments, urban streets, and natural landscapes under multiple weather conditions around the Beijing Institute of Technology. During the dataset construction, challenges such as foreground-background similarity and complex lighting conditions were thoroughly considered to enhance the dataset's capability for comprehensive evaluation of salient object detection algorithms. The establishment of the HSOD-BIT dataset provides significant data support for the research and development of hyperspectral salient object detection technology.
提供机构:
北京理工大学
创建时间:
2024-03-19
原始信息汇总

数据集概述

数据集名称

  • HSOD-BIT (V1)

数据集描述

  • HSOD-BIT是首个大规模、高质量的基准数据集,用于高光谱显著对象检测。
  • 该数据集旨在利用光谱信息提高显著对象检测任务的精度。
  • 提供319个高光谱数据立方体的像素级手动标注,并生成相应的伪彩色图像。
  • 每个数据立方体包含200个波段,覆盖从可见光到近红外波段的光谱信息,空间分辨率高达1240×1680像素。
  • 除了常规场景外,还特别收集了具有挑战性的数据,如背景干扰、光照不均、过度曝光等复杂场景。

数据集版本

  • 改进版本HOSD-BIT (V2)即将发布,包含更多数据和更全面的挑战。

数据集下载

数据格式更新

  • 为了更高效的数据存储,高光谱图像数据格式已从原始的MAT变更为H5。
AI搜集汇总
数据集介绍
main_image_url
构建方式
在构建HSOD-BIT数据集时,研究团队精心设计了数据采集与标注流程,以确保数据的高质量和多样性。该数据集包含319个高光谱数据立方体,每个立方体涵盖200个波段,从可见光到近红外波段,空间分辨率高达1240×1680像素。通过像素级手动标注,生成了相应的伪彩色图像,以满足当代深度学习模型的数据需求。此外,数据集还特别收集了具有挑战性的场景,如相似背景干扰、不均匀光照和过曝等,以增强其在实际应用中的实用性和评估能力。
特点
HSOD-BIT数据集的显著特点在于其大规模、高质量和高多样性。作为首个用于高光谱显著物体检测的大型基准数据集,它充分利用了光谱信息的优势,旨在提升显著物体检测任务的精度。数据集不仅包含了常规场景,还特别纳入了多种复杂和挑战性的环境,如相似背景干扰和不均匀光照,从而更真实地反映了现实世界的复杂性。此外,数据集的高空间分辨率和多波段覆盖,使其在深度学习模型训练中具有极高的应用价值。
使用方法
使用HSOD-BIT数据集时,首先需参考requirements.txt文件安装相关依赖环境。随后,通过运行data_prepare目录下的sc_demo.py和sc_norm.py脚本进行数据预处理。在数据准备就绪后,可以训练教师网络,使用命令nohup python -m torch.distributed.launch --nproc_per_node=4 --master_port=6666 knowledge/teacher_train.py > teacher_train.log 2>&1 &。最后,训练DMSSN网络,使用命令nohup python -m torch.distributed.launch --nproc_per_node=4 --master_port=6666 tools/train.py > DMSSN.log 2>&1 &。为提高数据存储效率,数据格式已从MAT转换为H5,可通过h5py库进行数据加载。
背景与挑战
背景概述
在遥感技术与计算机视觉的交叉领域,高光谱显著目标检测(Hyperspectral Salient Object Detection, HSOD)已成为一个备受关注的前沿课题。HSOD-BIT数据集,作为首个大规模、高质量的高光谱显著目标检测基准数据集,由Qin Haolin及其团队于近期发布。该数据集旨在利用光谱信息的优势,提升显著目标检测任务的精度。HSOD-BIT数据集包含了319个高光谱数据立方体,每个数据立方体覆盖200个波段,从可见光到近红外波段,空间分辨率高达1240×1680像素。此外,数据集还特别收集了具有挑战性的场景,如背景干扰、光照不均等,以反映真实世界的复杂性,从而增强数据集的实用性和评估能力。
当前挑战
HSOD-BIT数据集在构建过程中面临多项挑战。首先,高光谱数据的采集和处理需要高精度的设备和技术,确保数据的准确性和完整性。其次,数据集的标注工作复杂且耗时,需要对每个像素进行手动标注,以确保标注的准确性。此外,数据集的多样性和复杂性也带来了挑战,如如何有效处理背景干扰、光照不均等问题,以提高模型的鲁棒性和泛化能力。最后,数据集的存储和传输也是一个重要问题,特别是从MAT格式转换为H5格式,以提高数据存储和处理的效率。
常用场景
经典使用场景
在遥感图像处理领域,HSOD-BIT数据集被广泛应用于高光谱显著目标检测任务中。该数据集通过提供319个高光谱数据立方体及其对应的伪彩色图像,支持研究人员开发和验证基于光谱信息的显著目标检测算法。其经典使用场景包括但不限于:利用数据集中的高光谱信息进行像素级显著目标分割,以及在复杂背景下(如相似背景干扰、不均匀光照等)进行目标检测模型的训练与评估。
衍生相关工作
基于HSOD-BIT数据集,研究人员已开展了一系列相关工作,推动了高光谱显著目标检测技术的发展。例如,DMSSN(Distilled Mixed Spectral-Spatial Network)模型即是在该数据集上进行训练和验证的,显著提升了显著目标检测的性能。此外,还有其他研究团队基于该数据集开发了多种高光谱图像处理算法,如光谱特征提取、空间特征融合等,进一步丰富了高光谱图像处理的研究内容。
数据集最近研究
最新研究方向
在遥感领域,高光谱显著目标检测(Hyperspectral Salient Object Detection, HSOD)近年来成为研究热点。HSOD-BIT数据集的推出,标志着该领域迈向了一个新的高度。该数据集不仅提供了大规模的高质量高光谱数据,还包含了多种复杂场景,如背景干扰、光照不均等,极大地提升了模型的实际应用能力。最新研究方向主要集中在利用混合光谱-空间网络(DMSSN)进行显著目标检测,通过提取和融合光谱与空间信息,显著提高了检测精度。此外,数据格式的优化,如从MAT到H5的转换,也为数据的高效存储和处理提供了新的解决方案。这些研究不仅推动了高光谱遥感技术的发展,也为实际应用中的目标检测任务提供了强有力的支持。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

CHARLS

中国健康与养老追踪调查(CHARLS)数据集,旨在收集反映中国45岁及以上中老年人家庭和个人的高质量微观数据,用以分析人口老龄化问题,内容包括健康状况、经济状况、家庭结构和社会支持等。

charls.pku.edu.cn 收录

Fruits-360

一个高质量的水果图像数据集,包含多种水果的图像,如苹果、香蕉、樱桃等,总计42345张图片,分为训练集和验证集,共有64个水果类别。

github 收录

GME Data

关于2021年GameStop股票活动的数据,包括每日合并的GME短期成交量数据、每日失败交付数据、可借股数、期权链数据以及不同时间框架的开盘/最高/最低/收盘/成交量条形图。

github 收录

中国区域地面气象要素驱动数据集 v2.0(1951-2020)

中国区域地面气象要素驱动数据集(China Meteorological Forcing Data,以下简称 CMFD)是为支撑中国区域陆面、水文、生态等领域研究而研发的一套高精度、高分辨率、长时间序列数据产品。本页面发布的 CMFD 2.0 包含了近地面气温、气压、比湿、全风速、向下短波辐射通量、向下长波辐射通量、降水率等气象要素,时间分辨率为 3 小时,水平空间分辨率为 0.1°,时间长度为 70 年(1951~2020 年),覆盖了 70°E~140°E,15°N~55°N 空间范围内的陆地区域。CMFD 2.0 融合了欧洲中期天气预报中心 ERA5 再分析数据与气象台站观测数据,并在辐射、降水数据产品中集成了采用人工智能技术制作的 ISCCP-ITP-CNN 和 TPHiPr 数据产品,其数据精度较 CMFD 的上一代产品有显著提升。 CMFD 历经十余年的发展,其间发布了多个重要版本。2019 年发布的 CMFD 1.6 是完全采用传统数据融合技术制作的最后一个 CMFD 版本,而本次发布的 CMFD 2.0 则是 CMFD 转向人工智能技术制作的首个版本。此版本与 1.6 版具有相同的时空分辨率和基础变量集,但在其它诸多方面存在大幅改进。除集成了采用人工智能技术制作的辐射和降水数据外,在制作 CMFD 2.0 的过程中,研发团队尽可能采用单一来源的再分析数据作为输入并引入气象台站迁址信息,显著缓解了 CMFD 1.6 中因多源数据拼接和气象台站迁址而产生的虚假气候突变。同时,CMFD 2.0 数据的时间长度从 CMFD 1.6 的 40 年大幅扩展到了 70 年,并将继续向后延伸。CMFD 2.0 的网格空间范围虽然与 CMFD 1.6 相同,但其有效数据扩展到了中国之外,能够更好地支持跨境区域研究。为方便用户使用,CMFD 2.0 还在基础变量集之外提供了若干衍生变量,包括近地面相对湿度、雨雪分离降水产品等。此外,CMFD 2.0 摒弃了 CMFD 1.6 中通过 scale_factor 和 add_offset 参数将实型数据化为整型数据的压缩技术,转而直接将实型数据压缩存储于 NetCDF4 格式文件中,从而消除了用户使用数据时进行解压换算的困扰。 本数据集原定版本号为 1.7,但鉴于本数据集从输入数据到研制技术都较上一代数据产品有了大幅的改变,故将其版本号重新定义为 2.0。CMFD 2.0 的数据内容与此前宣传的 CMFD 1.7 基本一致,仅对 1983 年 7 月以后的向下短/长波辐射通量数据进行了更新,以修正其长期趋势存在的问题。2021 年至 2024 年的 CMFD 数据正在制作中,计划于 2025 年上半年发布,从而使 CMFD 2.0 延伸至 2024 年底。

国家青藏高原科学数据中心 收录

PCLT20K

PCLT20K数据集是由湖南大学等机构创建的一个大规模PET-CT肺癌肿瘤分割数据集,包含来自605名患者的21,930对PET-CT图像,所有图像都带有高质量的像素级肿瘤区域标注。该数据集旨在促进医学图像分割研究,特别是在PET-CT图像中肺癌肿瘤的分割任务。

arXiv 收录