遇见数据集

aboardman/record-test_20260529_121304

收藏
Hugging Face2026-05-29 更新2026-05-31 收录
官方服务:

资源简介:

该数据集由LeRobot创建,用于机器人任务,具体针对so_follower机器人类型。数据集包含机器人的动作和观测数据:动作包括肩部平移、肩部提升、肘部弯曲、手腕弯曲、手腕旋转和夹爪位置,共6个浮点数值;观测状态与动作相同。此外,数据集提供前视和顶视图像视频,分辨率为480x640,每秒30帧,使用AV1编解码器。元数据包括时间戳、帧索引、剧集索引、索引和任务索引。数据以Parquet格式存储,总剧集为1,总帧数为1740,总任务为1,数据文件大小为100MB,视频文件大小为200MB,采样率为30fps。数据集适用于机器人控制和视觉任务的研究。

This dataset was created using LeRobot for robotics tasks, specifically for the so_follower robot type. It includes robot actions and observations: actions consist of shoulder pan, shoulder lift, elbow flex, wrist flex, wrist roll, and gripper positions, represented as 6 float32 values; observation states mirror the actions. Additionally, the dataset provides front and overhead image videos with a resolution of 480x640 at 30 fps, using the AV1 codec. Metadata includes timestamp, frame index, episode index, index, and task index. Data is stored in Parquet format, with 1 total episode, 1740 total frames, 1 total task, data file size of 100MB, video file size of 200MB, and a sampling rate of 30 fps. The dataset is suitable for research in robot control and vision tasks.

提供机构:
aboardman
搜集汇总
数据集介绍
aboardman/record-test_20260529_121304 数据集图片
构建方式
该数据集采用LeRobot框架构建,专为机器人模仿学习任务设计。数据集包含单个机器人操作示范片段,共计1740帧,涵盖了机械臂与夹爪的关节运动。通过记录6维关节动作与状态数据,并同步采集前视与俯视两个视角的高清视觉信息,以30帧/秒的采样频率捕捉机器人执行任务时的完整轨迹。数据以Parquet格式存储结构化信息,视频则采用AV1编码的MP4文件保存,确保了高效的数据压缩与读取性能。
特点
数据集的核心特点在于其多模态融合特性,同时提供关节空间的动作指令与状态观测,以及视觉观测中的双视角图像,为构建端到端的机器人操控模型提供了丰富的信息源。其结构清晰,包含时间戳、帧索引、片段索引等元数据,便于数据筛选与序列化处理。此外,数据集采用Apache 2.0开源许可,降低了使用门槛,同时通过LeRobot生态支持可视化预览,提升了数据探索的便捷性。
使用方法
用户可通过LeRobot库直接加载该数据集,利用其标准化接口快速获取动作、状态与图像数据。在训练模仿学习策略时,可依据片段索引划分训练集,借助序列化的帧索引构建时间连贯的观测序列。针对视觉输入,前视与俯视摄像机画面可用于联合特征提取,而关节状态与动作数据则适用于构建状态-动作映射。数据集预定义了单一任务,但通过调整框架索引可灵活适配多种序列建模需求。
背景与挑战
背景概述
该数据集由Hugging Face社区的研究者于2026年5月创建,依托LeRobot开源框架,专注于机器人操控领域。核心研究问题在于探索基于视觉与动作联合表征的模仿学习,通过采集SO-100型从动机械臂在真实环境中的精细操作数据,为机器人技能迁移提供基准。数据集以30Hz频率记录六维关节角度、前端与俯视摄像头图像,共计1740帧,虽规模有限,但为验证数据驱动机器人策略的可行性提供了初始案例。其对后续机器人数据集标准化及LeRobot生态发展具有示范意义。
当前挑战
机器人模仿学习领域面临的核心挑战在于从有限演示中泛化复杂操控技能,该数据集仅含单任务单次演示,难以支撑策略对光照、物体位姿或机械臂构型变化的鲁棒性。构建过程中,由于使用单台SO-100机械臂,数据多样性受限于操作空间与视角的单一性,加之视频采用AV1编码压缩,细节损失可能削弱视觉特征提取精度。此外,缺乏元数据标注(如任务语义或物体属性)与标准论文引用,限制了其在社区中的可复现性与可扩展性。
常用场景
经典使用场景
在机器人学与模仿学习的前沿探索中,数据集是驱动算法进步的基石。record-test_20260529_121304 数据集专为机器人操控任务而设计,记录了SOfollower机械臂在执行操作时的状态序列与视觉信息。其经典使用场景集中在基于视觉的运动策略学习上,研究人员可利用30帧每秒的前置与俯视相机图像,配合六维关节状态和动作数据,训练端到端的神经网络模型。该数据集尤其适用于构建模仿学习流水线,通过示教轨迹来驱动机器人复现复杂的操纵技能,如抓取、放置或精密装配等任务。
解决学术问题
该数据集有效回应了机器人学习领域两个核心学术挑战:多模态感知融合与高维连续动作空间建模。通过提供同步的视觉观测、关节状态与动作指令,它支持研究者探索视觉运动策略的泛化能力与鲁棒性,尤其解决了在有限示教数据下如何实现从感知到动作的精准映射这一难题。其标准化的结构与Apache-2.0许可协议,使得学术社区能够在一个透明、可复现的基准上进行对比实验,从而推动模仿学习、元学习以及基于模型的无模型强化学习等方向的纵深发展。
衍生相关工作
该数据集作为LeRobot生态系统的一部分,衍生了一系列具有影响力的研究工作。社区基于其结构规范开发了高效的策略模型,诸如扩散策略(Diffusion Policy)和动作分块变换器(Action Chunking Transformer)等经典工作,均采纳了类似的观测-动作时空对齐范式。此外,该数据集还催生了数据增强与域随机化技术,用于提升视觉运动策略的跨场景泛化能力,并启发了多任务模仿学习框架的构建,使得单一模型能够在不同机器人平台间共享技能。这些衍生成果共同构成了现代机器人学习领域的重要基石。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务