Unaligned Sparse-View X-ray Baggage Dataset

Unaligned Sparse-View X-ray Baggage Dataset是由韩国国家信息社会机构开发的数据集，主要用于安全行李检查中的X射线成像研究。该数据集包含541,260张2D X射线图像，涵盖317个类别，如禁止携带物品、数据存储介质和普通物品。数据集通过多能级X射线成像技术生成RGB彩色图像，并附有2D边界框和分割标签。数据集的创建旨在解决在稀疏视角下进行高精度CT重建的挑战，特别是在安全行李检查领域，以提高3D重建的准确性和效率。

Unaligned Sparse-View X-ray Baggage Dataset is a dataset developed by the National Information Society Agency of the Republic of Korea, primarily used for X-ray imaging research in security baggage inspection scenarios. This dataset contains 541,260 2D X-ray images covering 317 categories including prohibited carry-on items, data storage media, and general everyday items. It generates RGB color images via multi-energy X-ray imaging technology, and is accompanied by 2D bounding boxes and segmentation annotations. The dataset was created to address the challenge of high-precision CT reconstruction under sparse-view conditions, especially in the field of security baggage inspection, so as to improve the accuracy and efficiency of 3D reconstruction.

搜集汇总

数据集介绍

构建方式

该数据集的构建基于一个独特的多视角X射线行李检查系统，该系统由九个独立的扇形射线源和探测器组成，每个探测器以约40度的角度定位。图像采集过程中，物体通过传送带运输，系统捕捉多视角的X射线图像。这些图像随后被处理成RGB色彩映射图，源自双层探测器使用两种不同能量级别的X射线。数据集包含541,260张2D图像，分为317个类别，每张图像都带有2D边界框和分割标签。尽管未提供地面真实级别的重建体素数据，但该数据集通过其广泛的多视角标注，为稀疏视角下的CT重建提供了宝贵的资源。

特点

Unaligned Sparse-View X-ray Baggage Dataset的一个显著特点是其多视角和稀疏视角的特性，这使得它在安全行李检查领域具有独特的应用价值。数据集中的图像通过多能量X射线技术生成，能够提供丰富的材料密度和有效原子数信息，从而增强了对有机和无机物质的区分能力。此外，该数据集的构建方法特别适用于那些缺乏精确校准信息的场景，通过结合多光谱神经衰减场重建和线性推扫相机模型姿态优化，显著提高了新视角渲染的一致性。

使用方法

该数据集适用于多种计算机视觉和图像处理任务，特别是在安全行李检查和CT重建领域。研究人员可以利用这些多视角和稀疏视角的X射线图像，训练和验证基于深度学习的3D重建模型。例如，可以使用生成对抗网络（GANs）或扩散模型来生成3D表示，或者利用隐式神经表示（INR）方法进行图像重建和分割。此外，数据集中的2D边界框和分割标签可以用于训练物体检测和分割模型，进一步提高行李检查的自动化水平。

背景与挑战

背景概述

在安全行李检查领域，二维X射线系统已成为不可或缺的安全应用工具。利用X射线的强穿透力，这些系统能够有效识别随身行李中的违禁物品。然而，传统的三维重建方法通常依赖于旋转式CT系统，需要从数百个角度捕捉X射线图像，这不仅计算密集且耗时，不适合实时应用。为应对这些挑战，Shin Kim等研究人员于2024年提出了‘Unaligned Sparse-View X-ray Baggage Dataset’，该数据集专注于非对齐稀疏视角的X射线行李数据，旨在通过深度学习方法实现高效的三维重建。该数据集的创建不仅填补了公开可用重建数据的空白，还为训练所需的3D标注数据和体素表示提供了基础，对提升安全行李检查领域的泛化能力具有重要意义。

当前挑战

该数据集面临的挑战主要集中在两个方面。首先，稀疏视角下的X射线图像重建是一个复杂的问题，传统方法在处理稀疏数据时容易产生伪影，影响重建质量。其次，数据集的构建过程中，由于缺乏精确的校准信息，初始相机姿态估计存在噪声，这增加了重建过程的难度。此外，尽管深度学习方法在三维重建中展现了潜力，但大多数生成模型仍需大量高质量的3D数据进行有效训练，而稀疏视角下的高质量CT重建仍是一个未解难题。这些挑战不仅限制了数据集在实际应用中的效果，也对其在学术研究中的进一步发展提出了严峻考验。

常用场景

经典使用场景

在安全行李检查领域，Unaligned Sparse-View X-ray Baggage Dataset 数据集的经典使用场景主要集中在通过稀疏视角的X射线图像进行3D重建。该数据集通过多视角的X射线图像捕捉，结合线性推扫（LPB）相机模型，实现了对行李内部物体的精确3D重建。这种重建方法不仅提高了图像的可解释性，还能够在不依赖旋转系统的情况下，实现实时的行李检查。

解决学术问题

该数据集解决了在安全行李检查中，传统CT重建方法需要大量X射线投影和高计算资源的问题。通过引入深度学习技术和隐式神经表示（INR），该数据集能够在稀疏视角下实现高质量的3D重建，显著减少了计算复杂度和时间消耗。这一创新不仅提升了实时应用的可行性，还为学术界提供了新的研究方向，推动了CT成像技术的发展。

衍生相关工作

基于Unaligned Sparse-View X-ray Baggage Dataset 数据集，衍生了一系列相关研究工作。例如，研究者们开发了多种基于神经辐射场（NeRF）的优化方法，如SCNeRF、BARF和SPARF，这些方法在稀疏视角下实现了更精确的相机姿态估计和场景重建。此外，该数据集还促进了多光谱神经衰减场和颜色编码网络的研究，进一步提升了X射线图像的重建质量和可视化效果。