遇见数据集

leokswang/18122025-foldclo-13_lerobot_format

收藏
Hugging Face2026-05-27 更新2026-05-31 收录
官方服务:

资源简介:

该数据集是一个机器人学习数据集,使用LeRobot工具创建。数据集包含3个完整的情节(episodes),总计18718帧数据,帧率为30 fps。数据集中机器人类型为yam,特征包括观察图像(顶部、左侧和右侧摄像头,分辨率为360x640,3通道)、状态观察(14维浮点数组)、动作(14维浮点数组),以及时间戳、帧索引、情节索引等元数据。数据集以Apache 2.0许可证发布,主要用于机器人控制和研究任务。

This dataset is a robotics learning dataset created using the LeRobot tool. It contains 3 complete episodes, totaling 18718 frames with a frame rate of 30 fps. The robot type is yam, and features include observation images (top, left, and right cameras with resolution 360x640, 3 channels), state observations (14-dimensional float array), actions (14-dimensional float array), and metadata such as timestamp, frame index, and episode index. The dataset is released under the Apache 2.0 license and is primarily used for robot control and research tasks.

提供机构:
leokswang
搜集汇总
数据集介绍
leokswang/18122025-foldclo-13_lerobot_format 数据集图片
构建方式
该数据集基于LeRobot框架构建,专为机器人学习任务设计。数据采集自YAM机器人平台,共包含3个完整情节(episodes),累计18718帧时序数据,帧率为30 FPS。数据集将全部样本划分为单个训练集,数据以Parquet格式存储于data目录下的分块文件中,每个分块最多包含1000帧,并采用'chunk-{episode_chunk:03d}/episode_{episode_index:06d}.parquet'的路径规则组织。此外,数据集还包含一个meta/info.json文件,详细描述了版本、特征结构及拆分策略,确保数据加载的标准化与可复现性。
使用方法
用户可通过LeRobot库便捷加载此数据集。首先安装lerobot库,而后利用`load_dataset`函数指定数据集路径即可自动读取Parquet文件并解析特征。例如,在Python中执行`from datasets import load_dataset; dataset = load_dataset('18122025-foldclo-13_lerobot_format', split='train')`,即可获得包含'observation.images.top'、'observation.state'及'action'等字段的标准化数据字典。由于数据已按LeRobot规范格式化,用户可直接将其用于模仿学习、行为克隆或强化学习的训练管道,无需额外预处理。若需自定义批次采样,可结合PyTorch的DataLoader与Dataset类进一步适配。
背景与挑战
背景概述
该数据集由Hugging Face社区基于LeRobot框架构建,旨在推动机器人学习领域的数据标准化与共享。LeRobot作为一个专注于机器人模仿学习的开源生态系统,为研究人员提供了高效的数据采集与模型训练工具。该数据集创建于2025年,核心研究问题聚焦于如何利用多视角视觉与状态信息来训练机器人完成精细化操作任务。通过包含3个完整回合、共计18718帧的高频数据,以及三目摄像头图像、14维状态与动作空间,它展示了在数据规模有限条件下采集高质量机器人数据的可能性。作为Allen AI与LeRobot社区协作的成果,该数据集为后续机器人学习研究提供了可复现的基准,尤其在小样本模仿学习与多模态融合领域具有潜在影响力。
当前挑战
该数据集所解决的领域问题在于,机器人学习长期受困于数据采集成本高昂与标准化缺失。例如,传统方法依赖人工示教,数据格式各异导致跨平台迁移困难。构建过程中面临的具体挑战包括:1)如何利用YAM机器人平台在有限回合数内获取足够多样性的操作数据,因为仅3个回合的采集易产生过拟合风险;2)多视角图像(顶视、左、右)与14维状态/动作空间的对齐同步,需确保时间戳精度达到30fps且无帧丢失;3)数据存储采用Parquet格式与分块策略,虽然高效但增加了数据加载与可视化的复杂性,尤其是在缺乏视频文件的情况下,需依赖图像序列重建完整性。
常用场景
经典使用场景
在机器人学习领域,该数据集采用了LeRobot标准化格式,为模仿学习与行为克隆等算法提供了高质量的多模态训练样本。数据集包含来自三台高分辨率摄像头的视觉观测、14维的机器人状态向量及对应动作序列,帧率达30 FPS,可充分支撑端到端策略的建模与训练。经典使用场景包括构建从视觉输入到动作输出的神经网络策略,通过监督学习使机器人习得折迭或整理等精细操作技能,并借助多视角图像提升策略在复杂环境下的鲁棒性。
解决学术问题
该数据集有效填补了精细操作任务中规模小、标注不一、难以复现的研究空白。通过提供统一格式的多模态数据记录,它解决了模仿学习中动作与状态同步难、视觉泛化差等核心挑战。研究者得以系统探究状态表示学习、跨视角特征融合、时序建模方法,以及如何通过少量高质量示范实现高效的技能迁移。其标准化框架为衡量和对比不同算法在真实机器人操作任务上的表现提供了重要基准,推动了模仿学习向更鲁棒、更数据高效的方向发展。
实际应用
实际应用中,该数据集可助力工业与服务机器人快速习得诸如折迭布料、零件装配、烹饪等柔性或精密操作技能。机器人搭载多视角摄像头和双臂协作构型(如YAM机器人),通过加载该数据集的训练模型,能在不同光照、背景和初始条件下自主完成同一任务。这显著降低了编程成本和人工示教时间,使机器人更适应小批量、多品种的柔性生产线或家庭服务场景,加速了机器人从实验室走向落地部署的进程。
数据集最近研究
最新研究方向
该数据集聚焦于基于LeRobot框架的机器人操控技能学习,采用YAM机器人平台采集多视角视觉(顶部、左、右)与14维状态-动作序列,在仿人灵巧操作与数据驱动策略迁移领域具有前沿意义。当前研究热点包括:利用此类小样本高质量演示数据(3个回合、约18718帧)结合扩散策略或变换器模型,实现从仿真到真实环境的零样本泛化;同时,多摄像头协同感知与低延迟状态融合技术正被广泛探索,以提升复杂装配、柔性抓取等任务的鲁棒性。该数据集为验证算法对稀疏演示的泛化能力提供了标准测试床,其Apache-2.0许可亦降低了学术复现门槛,加速了机器人学习从闭源实验室走向开放社区的范式变革。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务