遇见数据集

humanoid_benchmark_assets

收藏
Hugging Face2026-08-11 更新2026-08-12 收录
官方服务:

资源简介:

该数据集包含两个 Unitree G1 机器人(配备 Dex3 灵巧手)的 USD 场景文件,专为 Newton / Isaac Lab 3.0 环境中的遥操作任务设计。文件已从 NVIDIA 发布的原始资产中派生并本地化,无需 Nucleus 服务器、S3 往返或大型 git-lfs 检出即可直接加载。具体包括:g1_43dof_local.usd(43 自由度,含身体和手指,用于自由基座全身任务)和 g1_29dof_with_dex3_base_fix_local.usd(修复碰撞几何,用于固定骨盆手臂逆运动学任务)。每个文件是自包含的单层 USD,无外部依赖。

This dataset contains USD scene files for two Unitree G1 robots (equipped with Dex3 dexterous hands), designed for teleoperation tasks in Newton / Isaac Lab 3.0 environments. The files are derived and localized from NVIDIAs original assets, allowing direct loading without Nucleus server, S3 round trips, or large git-lfs checkouts. It includes: g1_43dof_local.usd (43 degrees of freedom including body and fingers, for free-base SONIC whole-body tasks) and g1_29dof_with_dex3_base_fix_local.usd (fixed collision geometry, for fixed-pelvis arm inverse kinematics tasks). Each file is a self-contained single-layer USD with zero external dependencies.

创建时间:
2026-07-31
原始信息汇总

数据集概述

该数据集提供两个针对 Unitree G1 人形机器人 的 USD 格式资源文件,专为 Isaac Lab 3.0 / Newton (MJWarp) 遥操作任务设计,支持免 Nucleus 服务器、免 S3 下载、免大型 git-lfs 仓库即可本地加载使用。

资源文件说明

文件 机器人配置 用途
g1_43dof_local.usd 43 自由度 G1(29 身体 + 7+7 Dex3 灵巧手),圆柱形脚底 自由基座 SONIC 全身控制任务
g1_29dof_with_dex3_base_fix_local.usd Isaac Lab 标准 G1 + Dex3 骨盆固定的手臂 IK 任务

与标准资源的差异

  • g1_43dof_local.usd:脚踝碰撞使用 collisions_front / collisions_rear 圆柱体原语(与 NVIDIA SONIC 策略训练模型一致,而 Isaac Lab 标准 G1 使用整个脚部网格的凸包);同时包含全部 43 个关节,支持 Dex3 遥操作路径。
  • g1_29dof_with_dex3_base_fix_local.usd:修复了标准资源在 Newton 物理引擎下无碰撞几何体的问题,将 CollisionAPI 应用到 54 个子几何体(Gprim)上,并实现本地解析,避免运行时从 S3 获取资源。

使用方式

通过 Hugging Face CLI 下载,每个文件均为自包含单层 USD,外部依赖为零,无需额外网格目录。

bash hf download a2012203/humanoid_benchmark_assets --repo-type dataset --local-dir assets/robots --include "*.usd"

来源与许可

  • 两个文件均非原创,由 NVIDIA 发布的资源机械派生而来。
  • g1_43dof_local.usd 源自 NVlabs/GR00T-VisualSim2Real 仓库中的 g1_43dof.usd,剔除了远程 MDL 材质和 Simple_Room 舞台引用。
  • g1_29dof_with_dex3_base_fix_local.usd 源自 Isaac Lab 标准 G1+Dex3 资源,经过反实例化并为每个 Gprim 应用碰撞 API 后本地保存。
  • 底层 Unitree G1 模型版权归 Unitree 所有,上游许可条款适用;本仓库仅为便利镜像,不进行重新授权。上游权利方如需移除镜像,可通过仓库讨论区联系下架。
搜集汇总
数据集介绍
humanoid_benchmark_assets 数据集图片
构建方式
在机器人仿真与遥操作研究领域,高质量机器人资产的可移植性常受限于远程资源依赖与物理引擎兼容性。该数据集通过机械式派生方式构建:以NVIDIA发布的GR00T-VisualSim2Real项目中g1_43dof.usd作为基础,剥离其中指向Nucleus服务器的MDL材质与Simple_Room场景引用,保留几何、物理与碰撞属性的原始字节;同时,针对Isaac Lab默认G1+Dex3资产在Newton引擎中因碰撞体位于Xform作用域而失效的问题,先将资产去实例化,再将CollisionAPI逐一施加至54个子Gprim,最终保存为本地单层USD文件。
特点
该数据集的核心特征在于其自包含性与引擎适配性。两个USD阶段文件均不依赖外部网格目录或远程服务器,UsdUtils.ComputeAllDependencies报告零外部资产引用。其中43自由度版本采用圆柱体足底碰撞模型,与NVIDIA SONIC策略训练时所用模型一致,且完整驱动全部关节以支持Dex3遥操作;29自由度版本则解决了Newton引擎下碰撞几何缺失的缺陷,使手部与物体的物理交互得以正常进行。所有文件均以USD格式封装,便于在Isaac Lab 3.0与Newton(MJWarp)中直接加载。
使用方法
使用该数据集时,可通过Hugging Face命令行工具执行下载命令,将指定仓库中的USD文件提取至本地assets/robots目录。下载完成后,每个文件均为独立的单层USD阶段,无需额外配置网格目录或Nucleus服务器即可在Isaac Lab 3.0或Newton(MJWarp)中直接引用。对于自由基座全身任务,可加载g1_43dof_local.usd;对于固定骨盆的臂部逆运动学任务,则使用g1_29dof_with_dex3_base_fix_local.usd。使用前应确认遵循上游NVIDIA资产许可条款。
背景与挑战
背景概述
在具身智能与机器人学习领域,高保真仿真资产是连接算法研究与物理部署的关键基础设施。humanoid_benchmark_assets数据集于2025年前后由研究团队构建并发布于HuggingFace平台,旨在为Unitree G1人形机器人提供适应Newton/Isaac Lab遥操作流程的USD资产。该数据集核心解决仿真环境中的资产依赖与碰撞不一致问题,源自NVIDIA发布的GR00T-VisualSim2Real项目及Isaac Lab官方资产,经机械式派生与本地化重构,以消除Nucleus服务器与S3存储的远程依赖。其出现降低了人形机器人全身控制与灵巧操作研究的复现门槛,对推动可变形物体遥操作及强化学习策略迁移具有基础性支撑作用。
当前挑战
该数据集所应对的领域问题在于:人形机器人遥操作与全身控制仿真亟需物理一致且可独立加载的机器人资产。构建过程中的核心挑战包括:原始USD文件依赖Nucleus服务器上的MDL材质与Simple_Room场景,脱离该环境将引发渲染报错,需剥离纯外观引用而不损及几何与物理属性;Isaac Lab原生G1+Dex3资产的碰撞体位于Xform作用域而非网格本体,PhysX兼容而Newton不兼容,导致碰撞几何缺失、手部穿透物体,须先解除实例化再将CollisionAPI下沉至54个Gprim;同时需确保43自由度关节完整 articulation 以支持Dex3灵巧手遥操作,并维持与SONIC策略训练一致的圆柱形鞋底碰撞模型。
常用场景
经典使用场景
在具身智能与机器人学习领域,高保真仿真环境是策略训练与验证的核心基础设施。该数据集提供的两个USD格式机器人资产,分别对应43自由度Unitree G1人形机器人(含双Dex3灵巧手)与29自由度固定骨盆配置,经典使用场景集中于Isaac Lab 3.0及Newton物理引擎下的全身遥操作与臂式逆运动学任务。其中43自由度版本因采用圆柱形鞋底碰撞体并激活全部手指关节,直接支撑自由基座全身控制策略的复现与微调;29自由度版本则通过将碰撞API逐一下放至各几何图元,确保Newton引擎中手部与物体交互的物理真实性,成为灵巧操作与接触密集型任务的标准仿真载体。
实际应用
在实际部署中,该数据集服务于从仿真到现实的策略迁移流程。43自由度资产可直接用于训练Unitree G1的全身动态行走与遥操作策略,其圆柱鞋底碰撞模型与NVIDIA SONIC策略的训练条件一致,有助于缩小仿真与真实机器人之间的动力学差距。29自由度资产则适配固定基座场景,如桌面级灵巧手操作、工具使用与精细装配任务,研究者可在Isaac Lab中快速构建臂式逆运动学与接触力控制实验。两个文件均为单层USD格式,无需额外网格目录,便于集成至持续集成流水线与云端仿真服务,支撑大规模并行训练与自动化测试。
衍生相关工作
该数据集直接衍生于NVIDIA发布的GR00T-VisualSim2Real项目与Isaac Lab标准资产库,其43自由度版本被newton_g1_deformable_teleop项目用于可变形物体遥操作研究,推动了软体交互与全身控制结合的工作。29自由度版本则支撑了基于Newton物理引擎的灵巧操作基准测试,促进了接触丰富任务中碰撞建模方法的改进。此外,该资产作为轻量化镜像,激发了社区对仿真资产标准化封装、跨引擎兼容性适配以及许可证合规复用的讨论,间接影响了后续人形机器人仿真基准与开源资产治理实践。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务