URTF (Unaligned RGB-Thermal Fine-grained)

Name: URTF (Unaligned RGB-Thermal Fine-grained)
Creator: 安徽大学·智能计算与信号处理教育部重点实验室; 安徽大学·多模态认知计算安徽省重点实验室; 安徽大学·人工智能学院; 安徽大学·计算机科学与技术学院; 地球脉动科技有限公司
Published: 2026-04-30T01:01:38+08:00

arXiv2026-04-30 更新2024-06-21 收录

跨模态对象跟踪

智能监控

数据链接：

https://github.com/mmic-lcl/Datasets-and-benchmark-code 数据链接链接失效反馈

官方服务：

资源简介：

URTF是由安徽大学团队构建的目前最大规模无人机RGBT细粒度语义分割基准数据集，包含25,000组RGB-热红外图像对，涵盖61类精细标注的地物目标。该数据集创新性地保留了真实无人机平台常见的跨模态空间错位特征，覆盖多种光照和天气条件。数据通过双传感器无人机平台采集，经过严格的语义标注和错位量化处理，专门用于解决无人机视角下细粒度目标识别和跨模态错位校正等核心问题，推动全天候场景理解技术发展。

MDUR is the first large-scale benchmark dataset for composite degradation restoration of drone imagery, constructed by the team from Anhui University. It covers 43 degradation configurations ranging from single-factor degradation to four-factor composite degradation, and standardizes the visible/invisible data split. This dataset synthesizes multi-factor degradations in real flight environments, such as rain-fog, low-light blur and other common degradations, providing a systematic test platform for algorithm evaluation. Its data originates from raw images collected by actual drones, and paired samples are generated through controllable degradation processing. It aims to promote restoration research of drone imagery under complex degradation conditions, and improve the performance of downstream tasks such as large-scale mapping and infrastructure inspection.

提供机构：

安徽大学·智能计算与信号处理教育部重点实验室; 安徽大学·多模态认知计算安徽省重点实验室; 安徽大学·人工智能学院; 安徽大学·计算机科学与技术学院; 地球脉动科技有限公司

创建时间：

2026-04-30

原始信息汇总

数据集概述

数据集详情页面地址

https://github.com/mmic-lcl/Datasets-and-benchmark-code

数据集分类与资源

1. RGBT追踪数据集与基准代码

LasHeR
- 数据集下载：https://pan.baidu.com/s/19CR43_dqbMiV2HvweWHikg （提取码：z320）
- 工具包下载：https://pan.baidu.com/s/1SDohdsXcEkubF_pS_o43jw （提取码：mmic）
- 追踪结果：
  - 百度云：https://pan.baidu.com/s/1P7_9EsIFvH7rXwLEIiDQGw （提取码：mmic）
  - Google Drive：https://drive.google.com/drive/folders/1g0F0PR7W7IEByCZStpaQcqoCmzzoDHPh?usp=sharing
RGBT234
- 数据集下载：https://pan.baidu.com/s/1qicLsdFbZPf--d1rTijLrw （提取码：mmic）
- 工具包下载：https://pan.baidu.com/s/1UksOGtD2yl6k8mtB-Wr39A （提取码：4f68）
- 追踪结果：
  - 百度云：https://pan.baidu.com/s/1pnyf7FTFLL0fOenS5vkqGw （提取码：mmic）
  - Google Drive：https://drive.google.com/drive/folders/17FsdlaK5W6fFiQ-YfYi40EXOCxNURvsQ?usp=sharing
RGBT210
- 数据集下载：https://pan.baidu.com/s/1FClmX0SH3WarcczkEQbmwA （提取码：ps8j）
- 工具包下载：https://pan.baidu.com/s/1KHMlbhu5R29CJvundGL4Sw （提取码：8wtc）
- 追踪结果：
  - 百度云：https://pan.baidu.com/s/1c46jFGNCwrepAl-UI1YnpQ （提取码：mmic）
  - Google Drive：https://drive.google.com/drive/folders/1qflOb9MzT_7Ww3tPXvX_hkUiI18Tq8YV?usp=sharing
GTOT
- 数据集下载：https://pan.baidu.com/s/1sf49H1nZr7Aly4Ex0WqTfA （提取码：mmic）
- 工具包下载：https://pan.baidu.com/s/1iVVAXS4LZLvoQSGQnz7ROw （提取码：d53m）
- 追踪结果：
  - 百度云：https://pan.baidu.com/s/1V1WBeI0Kq3M6Rd_0L6B6iA （提取码：mmic）
  - Google Drive：https://drive.google.com/drive/folders/1nHXbXDLlR7DIBth1vbOCzgVn-OSqL9ZV?usp=sharing

2. 模态缺失RGBT追踪数据集

RGBT234-Miss
- 下载地址：https://github.com/Alexadlu/Modality-missing-RGBT-Tracking/tree/main/RGBT234-Miss
LasHeR245-Miss
- 下载地址：https://github.com/Alexadlu/Modality-missing-RGBT-Tracking/tree/main/LasHeR245-Miss
VTUAV176-Miss
- 下载地址：https://github.com/Alexadlu/Modality-missing-RGBT-Tracking/tree/main/VTUAV176-Miss

3. 跨模态目标追踪数据集

CMOTB-Easy
- 下载地址：https://pan.baidu.com/s/1w5MkfbsH_Gt-of5zrL4c-A?pwd=1234#list/path=%2F （提取码：1234）
CMOTB-Hard
- 下载地址：https://pan.baidu.com/s/1hFjmVGNoTKrpkHUqs5ziaA （提取码：viq4）
结果
- 下载地址：https://pan.baidu.com/s/17YPR9y3XfQpSONfXL_RHCQ （提取码：xxv0）
工具包
- 地址：https://github.com/xfarawayx/CMOTB_Toolkit
代码
- MArMOT、MAFNet、ProtoTrack代码发布地址：https://github.com/liulei970507

4. RGBT显著目标检测数据集与基准代码

VT821
- 下载地址：https://pan.baidu.com/s/1ksuUr3cr6_-fZAsSUp0n0w （提取码：9yqv）
VT1000
- 下载地址：https://pan.baidu.com/s/1i7gfrHoaaRuateMXBxvmMw （提取码：tb6l）
VT5000
- 下载地址：https://pan.baidu.com/s/196S1GcnI56Vn6fLO3oXb5Q （提取码：y9jj）
评估工具
- 地址：https://github.com/jiwei0921/Saliency-Evaluation-Toolbox

5. 无人机-地面视觉追踪数据集

数据集
- 下载地址：https://pan.baidu.com/s/1hggRTD2gu7cfJmBe_KXM9Q?pwd=mmic （提取码：mmic）

6. 微小目标追踪数据集与基准代码

数据集与评估工具箱
- GitHub地址：https://github.com/ZYB0726/MKDNet
Google Drive链接
- 地址：https://drive.google.com/drive/folders/1dK05KfpIoVHQnOwuKEE3vnW8jPF9zdZf?usp=share_link

7. 遥感数据集

FE4395
- 下载地址：https://pan.baidu.com/s/1YZy8CZbtTHzAjtEqMnlnlA （提取码：xlel）

8. 可见光图像引导的热图像超分辨率数据集

VGTSR (Baidu)
- 下载地址：https://pan.baidu.com/s/1eH9JoObOjuU3VFPT1yYHaw （提取码：pfsm）
VGTSR (Google Drive)
- 下载地址：https://drive.google.com/drive/folders/19WLeBytRQ8IkE0Cf-s6Ejzcg9WJGBltE?usp=sharing

9. 可见光图像引导的热图像超分辨率数据集-2.0

VGTSR2.0 (Baidu)
- 下载地址：https://pan.baidu.com/s/1l05hxPwtz5HIYqhQgPtCNQ?pwd=tgrs （提取码：tgrs）

10. 手部卫生评估数据集

HHA300
- 下载地址：https://pan.baidu.com/s/1fbHvs8kvkMulnVtVGFDl_A （提取码：mmic）

11. 放大车牌识别基准数据集

ELPR
- 下载地址：https://pan.baidu.com/s/1-hhWfJaWtociFWcfR7pTrA （提取码：4fvf）

12. 光学图像引导的SAR图像目标检测数据集

OGSOD-1.0 (Baidu)
- 下载地址：https://pan.baidu.com/s/1C5NxUWPQ9FVraeI1rvOx8A?pwd=7l6j （提取码：7l6j）
OGSOD-1.0 (Google Drive)
- 下载地址：https://drive.google.com/file/d/1CN_qOyMLY0aRqvvAhY6af76PobXwXNyf/view?usp=sharing
OGSOD-1.0 (Rotated Label) (Baidu)
- 下载地址：https://pan.baidu.com/s/1LJR63GcOnpVydYnq_DopcQ?pwd=nn31 （提取码：nn31）

13. OSPRC数据集

OSPRC
- 下载地址：https://pan.baidu.com/s/1rLSx8NzewvQi9O9Bsw6Hzg?pwd=d7bs （提取码：d7bs）

14. 文本到图像车辆重识别数据集

T2I VeRi (Baidu)
- 下载地址：https://pan.baidu.com/s/1QVwHQw2S79LkC8dASD2Gvw （提取码：h4ec）
T2I VeRi (Google Drive)
- 下载地址：https://drive.google.com/file/d/1tFmrQzTqltxMGPN71P4nSPs6Of23FGYV/view?usp=share_link

15. 密集微小目标检测数据集

DTOD (Baidu)
- 下载地址：https://pan.baidu.com/s/1obbMwfgDDc_Pj9ehjsvnTg （提取码：k6ig）

16. 基于高空无人机的多模态目标追踪数据集

HiAl (Baidu)
- 下载地址：https://pan.baidu.com/s/1ZvdAstzQ9FCdGlPlBDUpJg （提取码：n764）

17. 无人机视频车辆检测：基准与基线

VVD和CRNet (Baidu)
- 下载地址：https://pan.baidu.com/s/1VGp9y3R-L-_vJPpDN0sSlA （提取码：hwm5）

18. OGSSR数据集

OGSSR (Baidu)
- 下载地址：https://pan.baidu.com/s/1mAToM0zwkiVnGDyxR3voYA （提取码：7fak）

19. 视觉问答数据集

OSVQA
- 下载地址：https://pan.baidu.com/s/1s95s4KTs-wqmmCvwKfTcXA （提取码：9dhW）

20. NT-VOT211：大规模夜间视觉目标追踪基准

NT-VOT211 (GitHub)
- 下载地址：https://github.com/LiuYuML/NV-VOT211

搜集汇总

数据集介绍

URTF (Unaligned RGB-Thermal Fine-grained) 数据集图片

构建方式

MRSHaze数据集的构建基于Sentinel-1和Sentinel-2卫星的高分辨率图像，包含8,000对时间同步且精确地理配对的SAR-光学图像。SAR数据通过干涉宽幅模式获取，并经过正交校正、多视角处理和BM3D算法降噪。光学数据则从Sentinel-2 L2A产品中选取，确保云覆盖率不超过0.5%。为了生成合成雾霾图像，研究人员将清晰的遥感图像与从Sentinel-3 SLSTR产品中提取的云掩膜结合，并通过预训练的CycleGAN模型生成逼真的雾霾模式。所有图像对均经过精确的地理配准，以确保空间一致性。

使用方法

MRSHaze数据集主要用于评估和开发SAR引导的光学遥感图像去雾算法。研究人员可以使用该数据集训练和测试去雾模型，特别是那些依赖于跨模态融合的模型。数据集中的SAR图像提供了无雾的参考信息，帮助模型在去雾过程中更好地恢复细节。此外，MRSHaze还可用于评估去雾算法在下游任务（如语义分割和目标检测）中的表现。通过使用该数据集，研究人员能够更全面地评估算法在不同雾霾条件下的鲁棒性和适应性。

背景与挑战

背景概述

MRSHaze数据集由安徽大学多模态认知计算安徽省重点实验室的研究团队于2025年创建，旨在解决光学遥感图像去雾领域的关键问题。该数据集包含8000对高分辨率、时间同步且精确地理配准的SAR-光学图像，涵盖了多种雾霾条件下的场景。MRSHaze的推出填补了现有数据集在规模、分辨率和配准精度上的不足，为SAR引导的光学遥感图像去雾研究提供了重要的基准。该数据集不仅推动了去雾算法的发展，还对遥感图像分析的下游任务如语义分割等产生了深远影响。

当前挑战

MRSHaze数据集面临的挑战主要体现在两个方面：首先，光学遥感图像去雾本身是一个高度不适定问题，由于缺乏无雾参考图像，传统的单图像去雾方法在处理复杂且非均匀分布的雾霾时往往难以恢复清晰细节。其次，SAR图像与光学图像之间存在显著的模态差异，直接融合可能导致无雾区域的图像质量下降，且特征质量的不稳定性进一步加剧了跨模态域偏移问题。此外，构建过程中还面临SAR图像噪声处理、光学与SAR图像精确配准等挑战，这些因素共同增加了数据集的构建难度。

常用场景

经典使用场景

MRSHaze数据集在光学遥感图像去雾领域具有广泛的应用场景。其最经典的使用场景是作为SAR（合成孔径雷达）引导的光学遥感图像去雾算法的基准测试平台。通过提供高分辨率、精确对齐的SAR-光学图像对，MRSHaze能够有效支持去雾算法的训练与评估，尤其是在处理大范围、非均匀分布的雾霾场景时表现出色。该数据集还广泛应用于遥感图像的下游任务，如语义分割和目标检测，为这些任务提供了高质量的输入数据。

解决学术问题

MRSHaze数据集解决了光学遥感图像去雾领域中的多个关键学术问题。首先，它通过提供精确对齐的SAR-光学图像对，解决了传统单图像去雾方法缺乏参考信息的问题，显著提升了去雾效果。其次，该数据集通过引入多样化的雾霾分布和浓度，解决了现有数据集在雾霾分布非均匀性方面的不足，为开发更具鲁棒性的去雾算法提供了基础。此外，MRSHaze还解决了SAR图像噪声对去雾效果的影响问题，通过预处理去噪技术提升了SAR图像的质量，从而改善了跨模态融合的效果。

实际应用

MRSHaze数据集在实际应用中具有重要价值。在军事领域，它可用于提升战场环境下的遥感图像清晰度，增强目标识别和侦察能力。在农业和林业领域，该数据集支持高精度的植被监测和灾害评估，帮助决策者更好地理解地表变化。此外，MRSHaze还可用于城市规划、环境监测和气候变化研究，为这些领域提供高质量的遥感数据支持。其高分辨率和精确对齐的特性使得该数据集在多种实际场景中表现出色，推动了遥感图像处理技术的实际落地。

数据集最近研究