Hypersim

对于许多基本的场景理解任务，很难或不可能从真实图像中获得每像素的地面真相标签。我们通过引入Hypersim来解决这一挑战，Hypersim是用于整体室内场景理解的真实感合成数据集。为了创建我们的数据集，我们利用专业艺术家创建的合成场景的大型存储库，我们生成461室内场景的77,400图像，并带有详细的每像素标签和相应的地面真相几何形状。我们的数据集 :( 1) 完全依赖于公开可用的3D资产; (2) 包括每个场景的完整场景几何、材料信息和照明信息; (3) 包括每个像素的密集语义实例分割和每个图像的完整相机信息；(4) 将每张图像分为漫反射，漫射照明和非漫射剩余项，该项可捕获与视图相关的照明效果。