MIST
收藏资源简介:
MIST是一个基于合成数据引擎构建的大规模机载红外检测场景数据集,覆盖了目标具有低信杂比(SCR)和复杂运动的场景,具有多样化的目标/背景特征和精确标注。该数据集通过建模移动目标的姿态、大小和强度变化,并将它们无缝融合到真实背景中,以实现物理、几何和视觉上的真实感。
MIST is a large-scale airborne infrared detection scenario dataset constructed using a synthetic data engine. It covers scenarios where targets have low signal-to-clutter ratio (SCR) and complex motions, and features diverse target/background characteristics as well as precise annotations. This dataset achieves physical, geometric, and visual realism by modeling the pose, size, and intensity variations of moving targets and seamlessly fusing them into real-world backgrounds.
MIST 数据集概述
数据集基本信息
- 数据集名称:MIST (Multi-frame Infrared Small Target Detection in Complex Motion)
- 发布状态:已发布(发布于2026-03-08)
- 核心内容:一个用于多帧红外小目标检测(MISTD)的挑战性数据集及一个名为MISTNet的基线模型。
数据集详情
- 数据性质:大规模、面向机载红外探测场景的合成数据集。
- 构建方式:基于一个合成数据引擎构建。该引擎对运动目标的姿态、尺寸和强度变化进行建模,并将其无缝融合到真实背景中,以实现物理、几何和视觉上的真实感。
- 主要挑战:数据集中的目标具有低信杂比(SCR)和复杂运动特性。
- 数据规模与划分:
- 训练集:78个序列。
- 测试集:42个序列。
- 测试集中包含一个更具挑战性的子集MIST-Hard(11个序列),其目标具有极低SCR(≤1)、高度不规则的轨迹和超高速(>7像素/帧)的特点。
- 数据目录结构:
bbox/:边界框标注。image/:图像数据。mask/:掩码标注。point/:点标注。train.txt,val_all.txt,val_hard.txt:数据划分文件。
- 下载地址:https://drive.google.com/file/d/1jJabpOzmuLgxa52V1dtBuXv5-RpKNiSn/view?usp=sharing
基线模型 (MISTNet)
- 设计原理:基于信息瓶颈(IB)理论。
- 核心创新:
- 移位邻域补偿块(SNCB):用于高效建模多尺度对应关系,以进行隐式运动补偿,处理不规则和快速运动。
- 渐进蒸馏解码器(PDD):用于分层过滤冗余信息,同时保留目标相关信息,以抵抗目标无关的干扰。
- 预训练模型下载地址:https://drive.google.com/file/d/15Cu1G8Zga-tWszSByex5bb3x2VRfH2yW/view?usp=sharing
实验与基准测试
- 对比数据集:本工作同时在常用的NUDT-MIRSDT数据集上进行实验。
- 性能对比:在MIST和NUDT-MIRSDT数据集上,与30种先进方法进行了全面对比。
使用准备
-
主要依赖:
- Python 3.8+
- PyTorch 1.10.1+
- NATTEN 0.14.6
-
训练命令: bash python train.py --config ./configs/train_MISTNet_MIST.yaml python train.py --config ./configs/train_MISTNet_NUDTMIRSDT.yaml
-
测试命令: bash python test.py --config ./configs/test_MISTNet_MIST.yaml python test.py --config ./configs/test_MISTNet_NUDTMIRSDT.yaml
引用信息
- 论文标题:MIST: A Benchmark and Baseline for Multi-frame Infrared Small Target Detection in Complex Motion
- 期刊:IEEE Transactions on Image Processing
- 年份:2026
- BibTeX: bibtex @article{gao2026mist, title={MIST: A Benchmark and Baseline for Multi-frame Infrared Small Target Detection in Complex Motion}, author={Gao, Rui and Zhang, Meihong and Li, Gongyang and Li, Guanyi and Zhao, Kai and Zhang, Xianchao and Zeng, Dan}, journal={IEEE Transactions on Image Processing}, year={2026} }




