遇见数据集

salmonHan/record-test_20260527_230650

收藏
Hugging Face2026-05-27 更新2026-05-31 收录
官方服务:

资源简介:

该数据集是使用LeRobot创建的机器人数据集,专为机器人任务设计。数据集包含一个完整的训练集,总帧数为1797,视频文件大小为200MB,数据文件大小为100MB,帧率为30 FPS。机器人类型为so_follower,特征包括动作(如肩部、肘部、腕部和夹爪的位置)、观察状态(与动作相同的关节位置)、来自前置摄像头的观察图像(分辨率为720x1280,3通道,视频编码为av1,无音频),以及时间戳、帧索引、剧集索引、索引和任务索引等元数据。数据集结构以parquet文件格式存储,视频以mp4格式存储,适用于机器人控制、模仿学习或强化学习等应用场景。许可证为Apache-2.0。

This dataset is a robotics dataset created using LeRobot, designed for robotics tasks. It contains a complete training set with a total of 1797 frames, video file size of 200MB, data file size of 100MB, and a frame rate of 30 FPS. The robot type is so_follower, and features include actions (e.g., positions of shoulder, elbow, wrist, and gripper), observation states (same joint positions as actions), observation images from a front camera (resolution 720x1280, 3 channels, video codec av1, no audio), and metadata such as timestamp, frame index, episode index, index, and task index. The dataset structure is stored in parquet file format, with videos in mp4 format, suitable for applications like robot control, imitation learning, or reinforcement learning. The license is Apache-2.0.

提供机构:
salmonHan
搜集汇总
数据集介绍
salmonHan/record-test_20260527_230650 数据集图片
构建方式
该数据集基于LeRobot框架构建,旨在为机器人操控任务提供标准化的训练与评估数据。数据采集过程中,利用so_follower型机器人执行单一任务,共记录1个完整回合(episode),包含1797帧时序数据,采样频率为30帧/秒。数据以Parquet格式存储于分块(chunk)文件中,同时对应的视频流以AV1编码的MP4格式保存,分辨率为1280×720。数据集严格遵循LeRobot的v3.0规范,划分100%的样本作为训练集,确保了数据组织的高度结构化和可复现性。
特点
该数据集特色鲜明,集成了高维度多模态信息:每个时间步均包含6维动作指令(涵盖肩关节、肘关节、腕关节及夹爪位置)和对应的6维观测状态,并辅以高清前视摄像头视频流(RGB三通道)。所有数值特征采用32位浮点数,具备高精度特点。数据规模适中,总存储量约300MB(含100MB数值数据和200MB视频),便于快速下载与迭代实验。其统一的数据格式和分块机制,尤其适用于模仿学习、行为克隆等机器人学习算法的开发与验证。
使用方法
用户可通过Hugging Face的Datasets库或LeRobot提供的专用工具直接加载该数据集。加载后,数据以字典形式呈现,包含'action'、'observation.state'、'observation.images.front'等键,便于分别提取控制指令、机器人关节状态和视觉观测。建议在训练前利用data_path和video_path字段解析Parquet与视频文件,并通过`lerobot.visualize_dataset`在线空间进行数据预览与可视化。该数据集无预定义测试集,用户可按需自行划分,或结合LeRobot的仿真环境进行闭环评估。
背景与挑战
背景概述
在机器人学习领域,真实世界数据集的匮乏长期制约着模仿学习与强化学习算法的泛化能力。record-test_20260527_230650数据集由Hugging Face LeRobot社区创建,依托Apache-2.0开源协议发布,旨在为机器人操控任务提供标准化训练与评估基准。该数据集于2026年5月27日采集,核心研究问题聚焦于利用单任务、单示范轨迹数据验证机器人遥操作系统的数据采集与处理流程。虽仅包含1个片段(共1797帧),但其结构完整定义了六自由度机械臂(so_follower类型)的动作空间和状态空间,并配有高清视觉输入,为后续多任务、多示范数据集的建设奠定了基础。该数据的发布推动了低成本、可复现的机器人学习研究,尤其为小型实验室和开发者社区提供了便捷的入门资源,对机器人数据共享生态的构建具有示范意义。
当前挑战
该数据集所解决的领域挑战在于机器人学习中的数据稀缺性与标准化问题:传统机器人任务依赖大规模示范数据,但真实世界采集成本高昂,且不同机器人平台间数据格式不统一,导致算法难以跨场景迁移。record-test通过LeRobot框架提供了统一的数据结构,但构建过程中面临多项挑战:首先,单片段1797帧(约60秒)的数据量不足以支撑复杂泛化任务,样本多样性严重受限;其次,动作与状态空间仅包含6个自由度,缺乏力反馈、速度控制等精细维度,无法覆盖抓取、装配等精细操控需求;此外,数据采集依赖单次遥操作示范,存在人工操作噪声与轨迹重复性不足的问题,可能引入偏差;最后,视频编码采用AV1格式虽利于压缩,但解码效率与实时性要求之间的平衡仍需优化。
常用场景
经典使用场景
在机器人学习领域,该数据集作为LeRobot框架下的示范性采集样本,其经典使用场景聚焦于模仿学习的基准测试与算法验证。通过记录6自由度机械臂执行的单一任务轨迹,研究者可将其作为训练数据,利用行为克隆或逆强化学习方法,使机器人从人类演示中习得操作策略。数据集包含1797帧连续的关节状态与视觉观测,以30帧/秒的高频采样保留了运动动态的细腻特征,为对比不同模仿学习算法的效率与鲁棒性提供了标准化测试床。此外,其结构化格式——将动作、状态与多模态观测存入Parquet文件并附以压缩视频——便于快速加载与预处理,尤其适合验证端到端控制模型在有限样本下的泛化能力。
衍生相关工作
围绕该数据集格式,衍生出一系列具有影响力的经典工作。LeRobot框架本身即是一个开源生态,由此催生了如ACT(Action Chunking with Transformers)等算法在相同数据规范上的迁移研究,这些工作通过将连续动作序列切块处理,提升了长程任务预测的稳定性。此外,数据集的标准化结构促使研究者开发了通用评估基准——例如RLLBench的子集——用于在多组演示数据上统一评测模仿学习与强化学习的融合效果。视觉与状态模态的分离存储设计,亦启发了基于预训练视觉编码器(如ResNet、ViT)的微调范式,使得机器人能利用大规模图像数据预训练的知识,显著降低下游任务对演示数量的需求。
数据集最近研究
最新研究方向
该数据集record-test_20260527_230650依托LeRobot框架构建,聚焦于机器人操控任务的模仿学习与示教复现。在当前前沿方向中,此类数据集常被用于训练基于视觉与状态观测的端到端策略模型,尤其在机械臂精细操作如关节空间控制和夹爪协同任务上展现潜力。随着具身智能热潮的兴起,机器人数据集的规模化与标准化成为推动泛化能力突破的关键,该数据集以高帧率视频和多维度动作标签为特色,契合了真实世界机器人与仿真环境对齐的研究需求。其Apache-2.0许可进一步促进了开放协作,为机器人学习领域的可复现性研究奠定基础,对探索少样本学习与跨任务迁移具有深远意义。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务