Stereo Martian Image Dataset

Stereo Martian Image Dataset是由北京航空航天大学的研究团队创建的首个火星立体图像数据集，旨在提升火星图像的质量。该数据集包含1350对由Perseverance火星车上的Mast Camera Zoom（Mastcam-Z）拍摄的立体图像，分辨率为1152×1600，涵盖了火星表面的四种主要地貌：岩石、土壤、沙地和天空。数据集的创建过程中，研究人员排除了严重遮挡、损坏或视差变化不明显的图像，确保了图像的高质量。这些图像经过JPEG压缩以模拟实际传输过程，用于研究火星图像的质量增强。该数据集的应用领域主要集中在火星图像的质量提升，旨在解决火星图像在传输过程中因压缩而引入的伪影问题。Stereo Martian Image Dataset is the first Mars stereo image dataset developed by a research team from Beihang University, aiming to enhance the quality of Mars images. This dataset contains 1350 pairs of stereo images captured by the Mast Camera Zoom (Mastcam-Z) onboard the Perseverance rover, with a resolution of 1152×1600, covering four main landforms on the Martian surface: rocks, soil, sandy terrain, and sky. During the dataset creation process, researchers excluded images with severe occlusion, damage or insignificant parallax changes to ensure high-quality images. These images have been JPEG-compressed to simulate the actual transmission process, and are used for research on Mars image quality enhancement. The main application field of this dataset focuses on Mars image quality improvement, aiming to solve the artifact problem introduced by compression during Mars image transmission.

搜集汇总

数据集介绍

构建方式

Stereo Martian Image Dataset的构建基于火星探测器Perseverance搭载的Mast Camera Zoom (Mastcam-Z)系统所拍摄的双目图像。该数据集包含1,350对分辨率为1152×1600的火星立体图像，涵盖了火星表面的四种主要地貌：岩石、土壤、沙地和天空。在构建过程中，排除了存在严重遮挡、损坏或视差变化不显著的图像，确保数据集中的图像质量高且无明显伪影。随后，这些高质量图像通过JPEG压缩模拟实际传输过程，生成压缩后的火星立体图像。

特点

Stereo Martian Image Dataset的显著特点在于其图像具有高度的视图内和跨视图相关性。通过对比火星图像与地球图像，发现火星图像的相关系数（CC）和互信息（MI）显著高于地球图像，表明火星图像在视图内和跨视图上具有更强的信息关联性。这一特性使得该数据集特别适合用于火星图像的质量增强任务，尤其是利用立体图像中的互补信息来提升图像质量。

使用方法

Stereo Martian Image Dataset主要用于火星立体图像的质量增强研究。研究人员可以通过该数据集训练和测试基于跨视图注意力的质量增强网络，如MarsSQE。具体使用时，数据集中的压缩图像对作为输入，经过特征提取、跨视图注意力机制和图像重建等步骤，生成增强后的图像。实验表明，该数据集在提升火星图像质量方面具有显著效果，尤其在恢复纹理和边界细节方面表现优异。

背景与挑战

背景概述

Stereo Martian Image Dataset是由北京航空航天大学的Mai Xu等人于2024年首次建立的，旨在解决火星图像在传输过程中因有损压缩而导致的图像质量下降问题。该数据集包含1350对由火星探测器Perseverance上的Mastcam-Z相机拍摄的立体火星图像，涵盖了岩石、土壤、沙地和天空等主要火星地貌。通过分析，研究人员发现火星图像在视图内和视图间具有显著的高相关性，这一发现为后续的立体图像质量增强提供了重要依据。该数据集的建立不仅填补了火星立体图像质量增强领域的空白，还为火星探测任务中的图像处理提供了新的研究方向。

当前挑战

Stereo Martian Image Dataset在构建和应用过程中面临多重挑战。首先，火星图像在传输过程中因带宽限制而必须进行有损压缩，这导致图像出现压缩伪影，影响后续的科学分析。其次，火星地表的非结构化特征，如不规则的砾石、岩石和沙丘，使得像素级匹配变得极为困难，传统的单视图图像增强方法难以有效应对。此外，构建该数据集时，研究人员需要排除严重遮挡、损坏或视差变化不明显的图像，以确保数据的高质量和可用性。这些挑战促使研究人员开发了基于双层次跨视图注意力的质量增强网络MarsSQE，以充分利用火星图像的视图间相关性，提升图像质量。

常用场景

经典使用场景

Stereo Martian Image Dataset 在火星探测领域中被广泛用于研究火星图像的质量增强问题。该数据集通过提供由火星探测器 Mastcam-Z 拍摄的立体图像对，为研究人员提供了丰富的实验材料。这些图像涵盖了火星表面的岩石、土壤、沙地和天空等主要地貌，为立体图像质量增强算法的开发与验证提供了坚实的基础。

解决学术问题

该数据集解决了火星图像在传输过程中因压缩导致的图像质量下降问题。通过分析数据集中的立体图像对，研究人员发现火星图像在视图内和视图间具有显著的高相关性。这一发现为设计基于双层次跨视图注意力的质量增强网络提供了理论依据，有效提升了火星图像的视觉质量，为火星探测数据的进一步分析提供了更高质量的图像支持。

衍生相关工作

基于 Stereo Martian Image Dataset，研究人员提出了 MarsSQE 算法，这是首个专门针对火星立体图像的质量增强方法。该算法通过引入双层次跨视图注意力机制，充分利用了火星图像的高相关性，显著提升了图像质量。此外，该数据集还推动了其他相关研究，如火星图像的超分辨率重建、去噪等任务，为火星探测图像处理领域的发展提供了重要的数据支持。