EyeNavGS
收藏资源简介：
EyeNavGS数据集是首个公开的6自由度（6-DoF）导航数据集，包括46位参与者在12个不同真实世界的3D高斯散点（3DGS）场景中的探索轨迹。数据集收集于两个地点，使用Meta Quest Pro头戴式设备，记录了用户在自由站立6-DoF导航期间每个渲染帧的头部姿态和眼睛注视数据。每个场景都进行了精细的初始化，以校正场景倾斜和比例，确保用户在虚拟现实（VR）中拥有舒适的体验。EyeNavGS数据集及其配套的软件工具为6-DoF视口预测、自适应流式传输、3D显著性以及3DGS场景的注视点渲染等研究领域提供了宝贵的资源。
The EyeNavGS dataset is the first publicly available 6-degree-of-freedom (6-DoF) navigation dataset, comprising exploration trajectories from 46 participants across 12 distinct real-world 3D Gaussian Splatting (3DGS) scenes. Collected at two locations using Meta Quest Pro head-mounted devices, the dataset records head pose and eye gaze data for each rendered frame while users perform free-standing 6-DoF navigation. Each scene underwent meticulous initialization to correct scene tilt and scale, ensuring a comfortable user experience within virtual reality (VR). The EyeNavGS dataset and its accompanying software tools provide a valuable resource for research areas including 6-DoF viewport prediction, adaptive streaming, 3D saliency, and gaze-based rendering for 3DGS scenes.
👁️NavGS: A 6-DoF Navigation Dataset and Record-n-Replay Software for Real-World 3DGS Scenes in VR
数据集概述
- 数据集名称: 👁️NavGS (EyeNavGS)
- 数据类型: 6-DoF导航轨迹数据
- 应用场景: VR环境中的3D高斯泼溅(3DGS)场景
- 主要贡献:
- 首个公开的6-DoF导航数据集
- 包含46名参与者在12个真实世界3DGS场景中的导航数据
- 提供记录-回放软件工具链
数据集详情
数据采集
- 参与者: 46人(来自罗格斯大学和国立清华大学两个采集点)
- 设备: Meta Quest Pro头显(启用眼动追踪)
- 导航区域: 3m×3m物理游戏区域
- 记录内容:
- 头部位置/方向(四元数)
- 眼动注视位置/方向(四元数)
- 左右眼视场角(FOV)
- 时间戳(毫秒级)
场景信息
- 场景数量: 12个
- 场景来源:
- 8个来自原始3DGS论文
- 4个新训练自ZipNeRF数据集
- 场景类型: 包含室内外环境
- 场景初始化:
- 倾斜校正
- 公制尺度建立
- 起始视点选择
数据结构
dataset/ ├── truck/ │ ├── user1_truck.csv │ ├── user2_truck.csv │ └── ... ├── alameda/ │ ├── user1_alameda.csv │ └── ... └── (other scenes)
数据格式
- 文件格式: CSV
- 包含字段:
- ViewIndex
- FOV1-4
- Position X/Y/Z
- Quaternion X/Y/Z/W
- GazePos X/Y/Z
- GazeQ X/Y/Z/W
- Timestamp
配套软件工具
- 基础软件: SIBR viewer的定制分支(增加记录-回放功能)
- 实用工具:
- 虚拟世界坐标到物理舞台坐标转换
- 格式转换工具(csv2json/json2csv)
- 眼动可视化脚本
应用方向
- 6-DoF视口预测
- 自适应流媒体
- 3D显著性分析
- 注视点渲染技术
引用格式
bibtex @article{ding2025eyenavgs6dofnavigationdataset, title={EyeNavGS: A 6-DoF Navigation Dataset and Record-n-Replay Software for Real-World 3DGS Scenes in VR}, author={Zihao Ding and Cheng-Tse Lee and Mufeng Zhu and Tao Guan and Yuan-Chun Sun and Cheng-Hsin Hsu and Yao Liu}, journal={arXiv preprint arXiv:2506.02380}, year={2025} }
下载链接
- 1EyeNavGS: A 6-DoF Navigation Dataset and Record-n-Replay Software for Real-World 3DGS Scenes in VR美国罗格斯大学 · 2025年
