five

High-Resolution Inpainting Dataset for Airborne Object Detection

收藏
arXiv2025-01-14 更新2025-01-16 收录
下载链接:
https://doi.org/10.5281/zenodo.8297255
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集由Spleenlab GmbH与伊尔梅瑙理工大学的研究团队创建,旨在为无人机自主飞行中的安全关键对象检测提供支持。数据集包含7000张高分辨率图像,通过生成模型(如Pix2Pix和Stable Diffusion)进行图像修复生成,涵盖了不同天气、云层和光照条件下的背景。数据集的内容包括多种空中物体,如小型飞机、直升机、无人机等,每个图像都带有标注的边界框和分割掩码。数据集的创建过程基于现有的背景图像,通过修复技术插入目标物体,生成逼真的合成图像。该数据集主要用于训练和验证无人机检测与避让系统中的对象检测模型,旨在提高无人机在复杂环境中的安全性和可靠性。

This dataset was developed by Spleenlab GmbH and a research team from Technische Universität Ilmenau, aiming to support safety-critical object detection for autonomous unmanned aerial vehicle (UAV) flight. It contains 7000 high-resolution images generated via image inpainting using generative models such as Pix2Pix and Stable Diffusion, with backgrounds covering various weather, cloud cover and lighting conditions. The dataset includes multiple aerial targets including small aircraft, helicopters, UAVs and others, and each image is equipped with annotated bounding boxes and segmentation masks. The dataset was constructed based on existing background images, where target objects are inserted through inpainting techniques to produce realistic synthetic images. This dataset is primarily used to train and validate object detection models in UAV detection and avoidance systems, with the goal of improving the safety and reliability of UAVs in complex environments.
提供机构:
Spleenlab GmbH, 伊尔梅瑙理工大学
创建时间:
2025-01-14
搜集汇总
数据集介绍
main_image_url
构建方式
该数据集的构建采用了基于生成模型的高分辨率图像修复技术,旨在为无人机避障系统中的目标检测任务提供丰富的训练数据。具体而言,数据集通过从高分辨率背景图像中裁剪出目标区域,并利用Pix2Pix和Stable Diffusion两种生成模型在裁剪区域中合成目标对象。Pix2Pix通过条件生成对抗网络(cGAN)在分割掩码的引导下生成目标,而Stable Diffusion则结合文本提示和图像条件生成目标对象。生成的目标对象随后被无缝融合回原始背景图像中,形成最终的高分辨率图像。这一方法显著提升了数据集的多样性和真实性,尤其是在处理远距离小型目标时表现出色。
特点
该数据集的主要特点在于其高分辨率和多样化的目标对象生成能力。数据集中的图像分辨率极高,能够捕捉到远距离小型目标的细节,这对于无人机避障系统的目标检测至关重要。此外,数据集通过生成模型合成了多种类型的空中目标,包括小型飞机、直升机、无人机和热气球等,覆盖了广泛的空中交通场景。数据集还提供了精确的目标边界框和分割掩码,为训练和验证目标检测模型提供了高质量的标注数据。这种多样性和高精度的标注使得该数据集在安全关键领域的应用中具有显著优势。
使用方法
该数据集主要用于训练和验证无人机避障系统中的目标检测模型。研究人员可以使用数据集中的高分辨率图像和精确标注来训练深度学习模型,特别是针对远距离小型目标的检测任务。数据集中的生成图像可以用于预训练模型,以提升模型在真实场景中的泛化能力。此外,数据集还可以用于评估生成模型的性能,特别是在目标检测任务中的表现。通过对比生成数据与真实数据的检测结果,研究人员可以进一步优化生成模型,缩小生成数据与真实数据之间的领域差距。
背景与挑战
背景概述
High-Resolution Inpainting Dataset for Airborne Object Detection 数据集由 Spleenlab GmbH 的研究团队于 2025 年创建,旨在解决无人机自主飞行中的安全关键问题,特别是 Detect and Avoid(DAA)功能中的空中物体检测。该数据集通过生成模型和图像修复技术,填补了真实数据中罕见但关键的飞行物体检测场景,如小型飞机、直升机等。研究团队提出了一种基于生成对抗网络(GAN)和潜在扩散模型(LDM)的合成数据生成方法,显著提升了数据集的多样性和实用性。该数据集为无人机自主飞行中的物体检测提供了高质量的训练数据,推动了相关领域的研究进展。
当前挑战
High-Resolution Inpainting Dataset for Airborne Object Detection 数据集面临的主要挑战包括:1) 领域问题的挑战:空中物体检测需要在远距离捕捉极小的物体,这对图像分辨率和检测算法的精度提出了极高要求;2) 数据构建的挑战:由于真实场景中飞行物体的出现频率极低,获取足够的标注数据极为困难。研究团队通过图像修复技术生成合成数据,但合成数据与真实数据之间的领域差距(domain gap)仍然显著,导致检测模型在合成数据上的性能下降。此外,生成模型在物体颜色和纹理的真实性上仍需改进,以进一步提升数据集的实用性。
常用场景
经典使用场景
High-Resolution Inpainting Dataset for Airborne Object Detection 数据集主要用于无人机自主飞行中的安全关键功能——检测与避让(Detect and Avoid, DAA)。该数据集通过高分辨率图像修复技术,生成了包含空中目标(如小型飞机、直升机等)的合成图像,特别关注了目标在远距离下的小尺寸表现。这些图像为训练和验证目标检测模型提供了丰富的标注数据,尤其是在真实数据稀缺的情况下,填补了数据集的空白。
解决学术问题
该数据集解决了空中目标检测领域中的关键问题,即真实数据稀缺导致的模型性能不足。由于空中目标检测本身属于极端情况(corner case),真实数据中目标出现的频率极低,导致模型难以学习到有效的特征。通过生成合成数据,该数据集显著提升了目标检测模型的训练效果,尤其是在远距离小目标检测方面,为安全关键应用提供了可靠的数据支持。
衍生相关工作
该数据集的研究工作衍生了一系列基于生成模型的目标检测方法。例如,基于Pix2Pix和Stable Diffusion的图像修复技术被广泛应用于合成数据生成领域。此外,该数据集的研究还推动了条件生成对抗网络(cGANs)和潜在扩散模型(LDMs)在安全关键领域的应用,为未来的生成模型研究提供了重要的参考和实验平台。
以上内容由遇见数据集搜集并总结生成
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作