Hypersim

displayName: Hypersim
labelTypes: []
license:
- Hypersim Custom
mediaTypes:
- Text
paperUrl: https://arxiv.org/pdf/2011.02523v5.pdf
publishDate: "2021"
publishUrl: https://github.com/apple/ml-hypersim
publisher:
- Apple Inc.
tags:
- Indoor scene
taskTypes:
- 3D semantic segmentation

---
# 数据集介绍
## 简介
对于许多基本的场景理解任务，很难或不可能从真实图像中获得每像素的地面真相标签。我们通过引入Hypersim来解决这一挑战，Hypersim是用于整体室内场景理解的真实感合成数据集。为了创建我们的数据集，我们利用专业艺术家创建的合成场景的大型存储库，我们生成461室内场景的77,400图像，并带有详细的每像素标签和相应的地面真相几何形状。我们的数据集 :( 1) 完全依赖于公开可用的3D资产; (2) 包括每个场景的完整场景几何、材料信息和照明信息; (3) 包括每个像素的密集语义实例分割和每个图像的完整相机信息；(4) 将每张图像分为漫反射，漫射照明和非漫射剩余项，该项可捕获与视图相关的照明效果。
## 类定义
null
## 引文
```
@inproceedings{roberts2021hypersim,
title={Hypersim: A photorealistic synthetic dataset for holistic indoor scene understanding},
author={Roberts, Mike and Ramapuram, Jason and Ranjan, Anurag and Kumar, Atulit and Bautista, Miguel Angel and Paczan, Nathan and Webb, Russ and Susskind, Joshua M},
booktitle={Proceedings of the IEEE/CVF International Conference on Computer Vision},
pages={10912--10922},
year={2021}
}
```

## Download dataset
:modelscope-code[]{type="git"}

displayName: Hypersim
标签类型：无
许可证：Hypersim 自定义许可证
媒体类型：文本
论文链接：https://arxiv.org/pdf/2011.02523v5.pdf
发布日期：2021年
发布地址：https://github.com/apple/ml-hypersim
发布方：苹果公司（Apple Inc.）
标签：室内场景
任务类型：三维语义分割（3D semantic segmentation）
---
# 数据集简介
## 简介
针对诸多基础场景理解任务，从真实图像中获取每像素地面真值（ground truth）标签往往难以实现，甚至无法完成。为此我们推出Hypersim——一款用于整体室内场景理解的写实合成数据集，以解决上述难题。为构建该数据集，我们依托专业艺术家制作的大型合成场景素材库，生成了覆盖461个室内场景的77400张图像，每张图像均配有详细的每像素地面真值标签与对应的真值几何信息。本数据集具备以下特点：
(1) 完全依赖公开可用的3D资产；
(2) 涵盖各场景的完整场景几何、材质信息与光照信息；
(3) 包含每个像素的密集语义实例分割标注，以及每张图像的完整相机参数信息；
(4) 将每张图像拆解为漫反射分量、漫射照明分量与非漫射剩余分量，该分量可捕捉与视角相关的光照效果。
## 类别定义
无
## 引用文献

@inproceedings{roberts2021hypersim,
title={Hypersim: A photorealistic synthetic dataset for holistic indoor scene understanding},
author={Roberts, Mike and Ramapuram, Jason and Ranjan, Anurag and Kumar, Atulit and Bautista, Miguel Angel and Paczan, Nathan and Webb, Russ and Susskind, Joshua M},
booktitle={Proceedings of the IEEE/CVF International Conference on Computer Vision},
pages={10912--10922},
year={2021}
}

## 数据集下载
:modelscope-code[]{type="git"}

搜集汇总

背景与挑战

背景概述

Hypersim是一个用于室内场景理解的逼真合成数据集，包含77,400张图像和461个场景，提供详细的每像素标签、几何真值、场景几何、材质和光照信息。