five

Vaihingen dataset|语义分割数据集|计算机视觉数据集

收藏
github2024-05-02 更新2024-05-31 收录
语义分割
计算机视觉
下载链接:
https://github.com/ai4os-hub/semseg-vaihingen
下载链接
链接失效反馈
资源简介:
2D语义分割数据集,用于为多个对象类别分配标签。

A 2D semantic segmentation dataset designed for assigning labels to multiple object categories.
创建时间:
2024-05-02
原始信息汇总

数据集概述

名称: 2D semantic segmentation (Vaihingen dataset)

作者: G.Cavallaro (FZJ), M.Goetz (KIT), V.Kozlov (KIT), A.Grupp (KIT), S.Donayer Holz (KIT)

项目背景: 本项目是DEEP Hybrid-DataCloud项目的一部分,该项目获得欧盟Horizon 2020研究与创新计划的资助,资助协议号为777435。

应用场景: 该数据集用于ISPRS 2D Semantic Labeling Contest,主要用于2D语义分割,即对多个对象类别进行标签分配。

数据集获取: 获取Vaihingen数据集的详细信息可参考此处

数据集使用

安装指南:

  1. 本地安装: 需要Ubuntu 18.04和Python 3.6环境,具体依赖见requirements.txt。通过Git克隆仓库并使用pip安装。
  2. Docker安装: 提供预配置的Docker容器,可通过Docker命令快速部署。

训练流程:

  1. 数据预处理: 将训练文件vaihingen_train.hdf5和验证文件vaihingen_val.hdf5放置于./semseg-vaihingen/data目录下。
  2. 训练分类器: 通过Web界面选择TRAIN POST方法进行训练,可实时监控训练状态。

预测流程:

  • 使用预训练的分类器进行预测。通过Web界面的PREDICT POST方法,上传数据文件(支持.hdf5, .tiff, .png, .jpg格式),并选择结果输出格式(json.pdf)。

致谢

若认为本项目有用,请考虑引用DEEP Hybrid DataCloud项目相关文献。

AI搜集汇总
数据集介绍
main_image_url
构建方式
Vaihingen数据集的构建基于ISPRS 2D语义标注竞赛,旨在为多类别对象分配标签。该数据集通过高分辨率遥感图像和相应的语义标注,为城市环境中的建筑物、道路、植被等提供了详细的分割信息。数据集的构建过程包括图像采集、标注、预处理和格式转换,最终以HDF5格式存储,便于后续的深度学习模型训练和评估。
特点
Vaihingen数据集以其高分辨率和多类别标注为特点,适用于2D语义分割任务。数据集包含了丰富的城市环境信息,涵盖了建筑物、道路、植被等多种对象类别,为模型训练提供了多样化的场景。此外,数据集的标注质量高,确保了训练模型的准确性和可靠性。
使用方法
使用Vaihingen数据集进行模型训练时,首先需将训练和验证数据文件放置在指定目录下,并进行必要的预处理。用户可通过本地或Docker安装方式启动模块,利用提供的API接口进行模型训练和预测。训练过程中,用户可通过Tensorboard实时监控训练状态,并在训练完成后查看训练统计信息和日志。预测阶段,用户可上传测试数据,选择输出格式,获取模型的预测结果。
背景与挑战
背景概述
Vaihingen数据集,由G.Cavallaro、M.Goetz、V.Kozlov、A.Grupp和S.Donayer Holz等研究人员在德国卡尔斯鲁厄理工学院(KIT)和于利希研究中心(FZJ)合作开发,是2D语义分割领域的关键资源。该数据集作为ISPRS 2D语义标注竞赛的一部分,旨在解决多类别对象的标签分配问题。其创建得到了欧洲联盟Horizon 2020研究与创新计划的支持,通过DEEP Hybrid-DataCloud项目(资助协议号777435)实现。Vaihingen数据集不仅为语义分割算法提供了标准化的测试平台,还显著推动了遥感图像处理技术的发展。
当前挑战
Vaihingen数据集在构建过程中面临多项挑战。首先,数据预处理阶段需要将原始数据转换为适合训练的HDF5格式,这一过程涉及复杂的数据转换和格式标准化问题。其次,训练分类器时,如何有效利用数据集中的多类别信息,确保模型在不同类别间的高效区分,是一个技术难点。此外,数据集的多样性和复杂性要求算法具备高度的鲁棒性和泛化能力。最后,如何在实际应用中确保预测结果的准确性和实时性,也是该数据集面临的重要挑战。
常用场景
经典使用场景
Vaihingen数据集在2D语义分割领域中占据着举足轻重的地位。其经典使用场景主要集中在城市遥感图像的自动标注与分类任务上。通过该数据集,研究者能够训练深度学习模型,以高精度地识别和分割遥感图像中的不同地物类别,如建筑物、道路、植被等。这种应用不仅提升了遥感图像分析的自动化水平,还为城市规划、环境监测等领域提供了强有力的技术支持。
解决学术问题
Vaihingen数据集在解决遥感图像语义分割的学术研究问题上具有重要意义。它为研究者提供了一个标准化的数据平台,使得不同算法和模型可以在同一基准上进行比较和评估。通过该数据集,研究者能够深入探讨如何提高语义分割的准确性和鲁棒性,尤其是在复杂城市环境中的多类别分割问题。此外,该数据集还促进了跨学科研究,如结合计算机视觉与地理信息系统,推动了遥感技术的创新与发展。
衍生相关工作
Vaihingen数据集的发布催生了大量相关研究工作,特别是在深度学习与遥感图像分析的交叉领域。许多研究者基于该数据集开发了新的语义分割算法,如卷积神经网络(CNN)和全卷积网络(FCN)的改进版本,显著提升了分割精度。此外,该数据集还促进了多模态数据融合的研究,如结合光学图像与激光雷达数据,以提高地物分类的准确性。这些衍生工作不仅丰富了遥感图像处理的技术手段,也为实际应用提供了更多可能性。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

DermNet

DermNet是一个包含皮肤病图像的数据集,涵盖了多种皮肤病类型,如痤疮、湿疹、牛皮癣等。该数据集主要用于皮肤病诊断和研究。

www.dermnetnz.org 收录

rule34lol-images-part1

该数据集包含来自rule34.lol图像板的196,000个图像文件的元数据。元数据包括URL、标签、文件信息和点赞数。实际图像文件存储在zip存档中,每个存档包含1000个图像。该数据集是更大集合的一部分,分为Part 1和Part 2。数据集采用CC0许可,允许免费使用、修改和分发,无需署名。

huggingface 收录

中国区域地面气象要素驱动数据集 v2.0(1951-2020)

中国区域地面气象要素驱动数据集(China Meteorological Forcing Data,以下简称 CMFD)是为支撑中国区域陆面、水文、生态等领域研究而研发的一套高精度、高分辨率、长时间序列数据产品。本页面发布的 CMFD 2.0 包含了近地面气温、气压、比湿、全风速、向下短波辐射通量、向下长波辐射通量、降水率等气象要素,时间分辨率为 3 小时,水平空间分辨率为 0.1°,时间长度为 70 年(1951~2020 年),覆盖了 70°E~140°E,15°N~55°N 空间范围内的陆地区域。CMFD 2.0 融合了欧洲中期天气预报中心 ERA5 再分析数据与气象台站观测数据,并在辐射、降水数据产品中集成了采用人工智能技术制作的 ISCCP-ITP-CNN 和 TPHiPr 数据产品,其数据精度较 CMFD 的上一代产品有显著提升。 CMFD 历经十余年的发展,其间发布了多个重要版本。2019 年发布的 CMFD 1.6 是完全采用传统数据融合技术制作的最后一个 CMFD 版本,而本次发布的 CMFD 2.0 则是 CMFD 转向人工智能技术制作的首个版本。此版本与 1.6 版具有相同的时空分辨率和基础变量集,但在其它诸多方面存在大幅改进。除集成了采用人工智能技术制作的辐射和降水数据外,在制作 CMFD 2.0 的过程中,研发团队尽可能采用单一来源的再分析数据作为输入并引入气象台站迁址信息,显著缓解了 CMFD 1.6 中因多源数据拼接和气象台站迁址而产生的虚假气候突变。同时,CMFD 2.0 数据的时间长度从 CMFD 1.6 的 40 年大幅扩展到了 70 年,并将继续向后延伸。CMFD 2.0 的网格空间范围虽然与 CMFD 1.6 相同,但其有效数据扩展到了中国之外,能够更好地支持跨境区域研究。为方便用户使用,CMFD 2.0 还在基础变量集之外提供了若干衍生变量,包括近地面相对湿度、雨雪分离降水产品等。此外,CMFD 2.0 摒弃了 CMFD 1.6 中通过 scale_factor 和 add_offset 参数将实型数据化为整型数据的压缩技术,转而直接将实型数据压缩存储于 NetCDF4 格式文件中,从而消除了用户使用数据时进行解压换算的困扰。 本数据集原定版本号为 1.7,但鉴于本数据集从输入数据到研制技术都较上一代数据产品有了大幅的改变,故将其版本号重新定义为 2.0。CMFD 2.0 的数据内容与此前宣传的 CMFD 1.7 基本一致,仅对 1983 年 7 月以后的向下短/长波辐射通量数据进行了更新,以修正其长期趋势存在的问题。2021 年至 2024 年的 CMFD 数据正在制作中,计划于 2025 年上半年发布,从而使 CMFD 2.0 延伸至 2024 年底。

国家青藏高原科学数据中心 收录

Beijing Traffic

The Beijing Traffic Dataset collects traffic speeds at 5-minute granularity for 3126 roadway segments in Beijing between 2022/05/12 and 2022/07/25.

Papers with Code 收录

典型分布式光伏出力预测数据集

光伏电站出力数据每5分钟从电站机房监控系统获取;气象实测数据从气象站获取,气象站建于电站30号箱变附近,每5分钟将采集的数据通过光纤传输到机房;数值天气预报数据利用中国电科院新能源气象应用机房的WRF业务系统(包括30TF计算刀片机、250TB并行存储)进行中尺度模式计算后输出预报产品,每日8点前通过反向隔离装置推送到电站内网预测系统。

国家基础学科公共科学数据中心 收录