遇见数据集

record-80-test8_20260605_134123

收藏
Hugging Face2026-06-09 更新2026-06-10 收录
官方服务:

资源简介:

该数据集是一个机器人操作数据集,使用LeRobot框架创建。数据集包含53个episode,总计95,148帧数据,以分块parquet文件形式存储。每个数据样本包含机械臂的动作指令和观测信息。动作(action)和观测状态(observation.state)均为6维浮点向量,分别对应机械臂的六个关节位置(肩部平移、肩部升降、肘部弯曲、腕部弯曲、腕部旋转、夹爪位置)。观测部分还包含两个视角的视觉信息:机械臂视角图像(observation.images.arm)和俯视视角图像(observation.images.overhead),两者均为分辨率480x640、30 FPS的彩色视频流。此外,数据集还提供了时间戳、帧索引、episode索引、全局索引和任务索引等元数据字段。该数据集适用于机器人模仿学习、视觉-动作策略学习等机器人控制任务的研究与开发。

创建时间:
2026-06-06
原始信息汇总

数据集概述

  • 数据集名称: aboardman/record-80-test8_20260605_134123
  • 许可证: Apache-2.0
  • 任务类别: 机器人学 (Robotics)
  • 创建工具: 使用 LeRobot 创建

数据集结构

基本信息

  • 代码库版本: v3.0
  • 帧率 (FPS): 30
  • 总片段数 (Episodes): 53
  • 总帧数: 95,148
  • 总任务数: 1
  • 数据文件大小: 100 MB
  • 视频文件大小: 200 MB
  • 机器人类型: so_follower
  • 数据分割: 训练集 (train): 索引 0 至 52 (共53个片段)

特征字段

字段名 数据类型 形状 说明
action float32 [6] 动作指令,包含机械臂关节位置(shoulder_pan/lift/elbow_flex/wrist_flex/roll)和夹爪位置
observation.state float32 [6] 观察状态,与动作维度相同
observation.images.arm 视频 (AV1编码) [480, 640, 3] 机械臂视角图像,30fps
observation.images.overhead 视频 (AV1编码) [480, 640, 3] 俯视视角图像,30fps
timestamp float32 [1] 时间戳
frame_index int64 [1] 帧索引
episode_index int64 [1] 片段索引
index int64 [1] 样本索引
task_index int64 [1] 任务索引

数据文件路径格式

  • 数据文件: data/chunk-{chunk_index:03d}/file-{file_index:03d}.parquet
  • 视频文件: videos/{video_key}/chunk-{chunk_index:03d}/file-{file_index:03d}.mp4
  • 配置: 默认配置 (default),数据文件位于 data/*/*.parquet

引用信息

  • 论文: [需要更多信息]
  • 首页: [需要更多信息]
  • BibTeX: [需要更多信息]
搜集汇总
数据集介绍
record-80-test8_20260605_134123 数据集图片
构建方式
本数据集专为机器人学习领域设计,其构建依托于LeRobot框架,通过记录机器人执行任务的完整流程生成。数据采集聚焦于SO-100型从动机械臂,以30帧每秒的采样频率同步捕获机械臂六个关节的动作指令(action)与对应的本体状态(observation.state),同时利用双视角摄像头(臂上视角与俯视视角)录制640×480像素的彩色视频流,采用AV1编码压缩存储。所有数据按片段(episode)组织,共计53个片段、95148帧,并统一划分为训练集,确保了数据在时间序列上的连续性与结构一致性。
特点
该数据集最显著的特点在于其多模态融合的架构,同时涵盖低维运动学数据与高维视觉信息。低维数据包含关节位置动作向量与状态向量,维度精确对应机械臂的六个自由度;视觉部分则通过臂载与俯视两个机位提供互补的场景观察,丰富了感知维度。数据整体以Apache-2.0开源协议发布,兼容LeRobot生态,且内置了完整的元信息(如帧率、编码参数、数据分块策略),便于研究者直接用于模仿学习、行为克隆等算法的训练与评估。
使用方法
使用此数据集时,研究者可通过LeRobot库直接加载与解析。数据以Parquet格式存储结构化数值,视频片段则独立封装为MP4文件,通过元信息中的索引路径进行关联。典型的调用流程包括:利用LeRobot的Dataset类读取数据,指定'default'配置以获取全部53个片段;随后可对动作数据与观测图像进行对齐采样,构建训练样本对。数据集虽未预设测试集,但用户可根据需求自行划分,或借助LeRobot内置的可视化工具(如HuggingFace Space)预览片段内容,辅助数据验证与模型调试。
背景与挑战
背景概述
record-80-test8_20260605_134123数据集由HuggingFace LeRobot团队于2026年6月创建,聚焦于机器人操作领域的模仿学习研究。该数据集依托LeRobot框架,旨在为机器人学习提供标准化的多模态训练样本,涵盖关节角度、末端执行器位姿及多视角视觉输入,以推动机器人从人类演示中自主习得复杂操作技能。作为开源社区的重要贡献,该数据集以Apache-2.0协议发布,降低了机器人研究的数据门槛,促进了领域内算法与模型的比较验证,对机器人模仿学习与通用操作策略的发展具有潜在影响力。
当前挑战
该数据集所面对的领域核心挑战在于机器人操作技能的泛化与鲁棒性——现有模型往往难以在物体位置、光照变化或环境干扰下保持稳定表现,而本数据集通过多视角视觉与高精度运动数据为缓解这一问题提供了基石。构建过程中,技术挑战包括多传感器同步与标定(如6自由度手臂关节与两台480p摄像头的时空对齐),以及大规模轨迹数据的高效存储与检索(采用分块Parquet格式与AV1视频压缩,总数据约300MB,包含53个片段与95148帧)。此外,确保演示质量的多样性以避免策略过拟合,也是数据采集需克服的难题。
常用场景
经典使用场景
在机器人学习领域,模仿学习作为一种高效的行为获取范式,常依赖高质量的动作-状态序列数据。该数据集以6自由度机械臂为实体平台,同步记录了关节角度、夹爪开合等连续动作指令以及对应的视觉观测图像,涵盖了53个完整轨迹片段、逾9.5万帧时序样本。研究者可将其作为行为克隆或逆强化学习的基准训练资源,通过定义状态空间和动作空间的映射关系,驱动模型复现示教轨迹中的操作策略。这种从人类演示到策略泛化的迁移路径,构成了该数据集最核心的应用场景。
衍生相关工作
该数据集的构建依托于LeRobot框架,其标准化格式催生了多项衍生研究。经典工作包括采用扩散策略(Diffusion Policy)在该数据集上进行条件动作生成,验证了生成式模型在复杂动作序列拟合中的优越性;亦有研究基于其多模态观测通道(关节状态与视觉图像),探索了隐式行为克隆与状态表征学习的融合方法。此外,开源社区中围绕该数据集展开了数据增强与因果推断实验,尝试通过随机化动力学参数提升策略跨场景迁移能力。这些工作共同拓展了机器人从单任务演示到多任务泛化的研究边界。
数据集最近研究
最新研究方向
该数据集聚焦于机器人操作技能的学习与复现,具体涵盖6自由度关节型机械臂(so_follower)的动作序列与观测状态记录。结合LeRobot开源框架,当前研究前沿正围绕模仿学习与行为克隆展开,通过高帧率(30 FPS)的多视角视觉输入(臂部与俯视相机)与精确的动作标签,推动机器人从示范中自主习得复杂操作策略。该数据集记录的53个回合、近10万帧数据,为验证端到端神经网络模型在真实物理场景中的泛化能力提供了标准化的训练与评估基准,尤其服务于灵巧操作任务。在具身智能热潮下,此类数据集的开放有助于弥合仿真与现实间的鸿沟,加速机器人学习算法从实验室走向产业应用,为人机协作与自动化生产注入新动能。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务