遇见数据集

salmonHan/record-test_20260527_235131

收藏
Hugging Face2026-05-27 更新2026-05-31 收录
官方服务:

资源简介:

该数据集是使用LeRobot创建的机器人数据集,专门针对so_follower机器人类型。它包含1个episode、1797帧和1个任务,数据以parquet格式存储,总数据文件大小为100MB,视频文件大小为200MB。数据集特征包括:动作(6个浮点32位关节位置:shoulder_pan.pos、shoulder_lift.pos、elbow_flex.pos、wrist_flex.pos、wrist_roll.pos、gripper.pos)、观测状态(与动作相同的6个关节位置)、前视图像(视频格式,分辨率720x1280,3通道,30fps,无音频)、时间戳、帧索引、episode索引、索引和任务索引。数据按chunk组织,用于机器人控制和视觉任务,适用于训练和评估机器人学习算法。

This dataset is a robotics dataset created using LeRobot, specifically for the so_follower robot type. It contains 1 episode, 1797 frames, and 1 task, with data stored in parquet format. The total data file size is 100MB, and video file size is 200MB. Dataset features include: action (6 float32 joint positions: shoulder_pan.pos, shoulder_lift.pos, elbow_flex.pos, wrist_flex.pos, wrist_roll.pos, gripper.pos), observation.state (same 6 joint positions as action), observation.images.front (video format, resolution 720x1280, 3 channels, 30fps, no audio), timestamp, frame_index, episode_index, index, and task_index. The data is organized into chunks and is intended for robot control and visual tasks, suitable for training and evaluating robot learning algorithms.

提供机构:
salmonHan
搜集汇总
数据集介绍
salmonHan/record-test_20260527_235131 数据集图片
构建方式
该数据集基于LeRobot框架构建,专为机器人学习领域设计。数据采集自so_follower型机器人,记录单次任务执行过程中的完整轨迹,共包含1797帧时序数据。数据集以Parquet格式存储动作指令与状态观测信息,并辅以MP4格式的高清视觉记录,视频分辨率为720×1280像素,采用AV1编码并以30帧/秒的速率捕获。数据文件按照分块索引组织,便于分布式加载与高效存取。
使用方法
用户可通过LeRobot库提供的API直接加载该数据集,利用内置的可视化工具在HuggingFace Spaces中预览轨迹数据与回放视频。数据集默认划分为训练集,适用于训练机器人策略模型。使用时需配置数据路径与视频文件路径,根据features定义解析动作、状态和图像张量。研究者可借助chunksize参数实现流式读取,结合帧索引与时间戳对齐多模态数据,进行端到端的机器人操控学习实验。
背景与挑战
背景概述
本数据集名为record-test_20260527_235131,创建于2026年5月27日,由salmonHan研究团队基于LeRobot平台构建,遵循Apache-2.0开源协议。该数据集聚焦于机器人学领域,核心研究问题是通过录制的真实机器人操作数据,推动模仿学习与行为克隆算法的研究。数据集包含单一任务、一段完整的机器人操作演示,共计1797帧图像与对应6维动作状态序列,记录了SO_Follower型机械臂各关节的角度变化及末端夹爪状态。数据以高效Parquet格式存储,并附有720p高清视频观测,为机器人学习提供了轻量级、高保真的基准样本。尽管规模较小,该数据集代表了从仿真到真机数据迁移的重要尝试,有望在机器人技能获取与策略泛化研究中发挥示范作用。
当前挑战
当前数据集中存在多重挑战。首先,在领域问题层面,机器人模仿学习面临数据稀缺与任务多样性匮乏的困境,本数据集仅含单个任务与一段演示,难以支持复杂策略的泛化训练。其次,构建过程中的挑战包括:原始数据采集需精确同步多模态信号(6维关节状态与30fps视频),任何时序偏差都会引致策略学习失败;此外,单一SO_Follower机械臂的数据缺乏跨构型兼容性,限制了模型在不同硬件上的复用。数据量上,总帧数1797、视频200MB的规模,在深度学习场景下极易导致过拟合,远不足以捕捉真实环境中动作分布的随机性。这些挑战凸显了从单次演示中提取鲁棒性策略的难度,也指明了扩大采样、引入任务变体与数据增强的必要方向。
常用场景
经典使用场景
record-test_20260527_235131数据集在机器人学习领域中扮演着基础性角色,尤其适用于模仿学习与行为克隆算法的训练与验证。该数据集收录了单条完整轨迹,包含1797个时序帧,记录了六自由度机械臂so_follower在单一任务场景下的精细运动控制数据。研究者可借助其中连贯的动作指令(action)与对应的状态观测(observation.state),结合前视摄像头以30帧每秒速率采集的1280×720分辨率视觉信息,构建从感知到动作的端到端映射模型。这一经典范式为机器人复现人类示教行为提供了标准化数据基础。
解决学术问题
该数据集有效回应了机器人控制领域中数据稀缺与泛化能力不足的学术难题。通过提供高保真度、高时间分辨率的传感器及动作数据,它支持研究者深入探究多模态信息融合对策略学习的影响。具体而言,数据集中动作与状态空间均呈现六维连续值特性,涵盖肩部、肘部及腕部等多个关节,这为研究高维连续动作空间的强化学习与逆动力学建模提供了高质量的基准。其意义在于推动了无模型控制方法的发展,使学术社区能够在低门槛条件下验证新型算法在真实机器人平台上的有效性。
实际应用
在工业自动化与智能服务领域,该数据集展现出显著的应用潜力。基于其中记录的精准轨迹,工程师可快速训练机械臂完成如零件抓取、精密装配等重复性劳动任务。前视图像与关节角度的时间序列对应关系,使得构建具备视觉伺服能力的操作实体成为现实,从而将示教学习技术落地于柔性生产线。此外,在医疗辅助、家庭服务等非结构化环境中,该数据集也为机器人自主完成如递送物品等精细操作提供了可靠的技能迁移基础,有助于降低系统部署对人工编程的依赖程度。
数据集最近研究
最新研究方向
该数据集依托LeRobot框架构建,专为机器人模仿学习与操作技能迁移而设计。在前沿研究中,此类精细化的机器人遥操作数据集正成为连接仿真环境与真实世界的关键桥梁,尤其在高精度工业装配、灵巧手抓取及人机协作等复杂任务中展现出巨大潜力。伴随大规模预训练模型在机器人领域的渗透,利用此类包含高帧率视觉与多关节状态信息的数据集,开展端到端的策略学习与行为克隆,已然成为推动通用机器人技能泛化的重要路径。该数据集的发布,不仅为复现和验证So-Follower等具身智能基线模型提供了标准化基准,更通过其开放的Apache-2.0许可证,激励社区在低延迟控制与多模态感知融合等前沿课题上展开深入探索,对加速机器人从实验室走向实际应用具有显著的催化意义。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务