TbD-3D

我们提出了一种新方法，可以在全 6 个自由度中跟踪快速移动的对象，主要是非均匀球面，同时估计它们的 3D 运动轨迹、3D 姿势和对象外观变化，时间步长仅为视频帧曝光时间。子帧对象定位和外观估计允许逼真的时间超分辨率和精确的形状估计。该方法称为 TbD-3D（通过 3D 去模糊跟踪）依赖于一种新的重建算法，该算法解决了分段去模糊和消光问题。通过最小化重投影误差来估计 3D 旋转。作为第二个贡献，我们提出了一个新的具有挑战性的数据集，其中包含快速移动的物体，这些物体会改变它们的外观和与相机的距离。使用帧曝光之间零延迟的高速摄像机记录来生成具有不同帧速率的视频，并用真实轨迹和姿势进行注释。