遇见数据集

Kinseong/makermods_bottle_settler

收藏
Hugging Face2026-05-29 更新2026-05-31 收录
官方服务:

资源简介:

该数据集由LeRobot工具创建,专注于机器人学任务,具体使用so101_follower机器人类型。数据集包含51个episodes,总计51029帧,数据以parquet文件格式组织,每个chunk大小为1000帧。数据集总大小为100MB,视频文件大小为500MB,帧率为30fps。特征包括动作(如肩部平移、肩部抬升、肘部弯曲、手腕弯曲、手腕旋转和夹爪位置)、观测状态(与动作相同的关节位置)、来自前摄像头的图像观测(分辨率为480x640,3通道,视频编码为av1),以及时间戳、帧索引、episode索引等元数据。所有数据仅用于训练分割。

This dataset was created by LeRobot, focusing on robotics tasks and specifically utilizing the so101_follower robot type. It contains 51 episodes, totaling 51029 frames. The data is organized in Parquet file format, with each chunk having a size of 1000 frames. The total size of the dataset is 100 MB, while the video files have a combined size of 500 MB, with a frame rate of 30 fps. The dataset features include actions (such as shoulder translation, shoulder elevation, elbow flexion, wrist flexion, wrist rotation, and gripper position), observation states (matching the same joint positions as the actions), image observations from the front-facing camera (with a resolution of 480x640, 3 channels, and video encoded in AV1), as well as metadata such as timestamps, frame indices, and episode indices. All data is solely used for segmentation training.

提供机构:
Kinseong
搜集汇总
数据集介绍
Kinseong/makermods_bottle_settler 数据集图片
构建方式
在机器人学习与灵巧操作领域,高质量演示数据集是驱动策略学习的关键资源。makermods_bottle_settler数据集基于LeRobot框架构建,由用户通过远程操作so101_follower型机器人执行瓶体放置任务录制而成。数据集包含51个完整演示片段,总计51029帧操作数据,以1000帧为单位切分为多个数据块,并采用Parquet格式存储结构化动作与状态信息,同时将前置摄像头采集的640×480分辨率视频以AV1编码压缩为MP4格式保存,实现多模态数据的紧凑组织。
特点
该数据集聚焦于单一操作任务,但通过51个多样化演示覆盖了瓶体放置过程中丰富的接触与姿态调整模式。动作空间与观测状态均采用6维关节变量描述,涵盖肩部、肘部、腕部及夹爪的位姿信息,为模仿学习提供了精准的连续控制信号。视频数据以30帧/秒的稳定帧率记录操作过程,并保留完整的时间戳与帧索引,便于时序建模与轨迹对齐,兼具数据规模适中与标注完整性的优势。
使用方法
数据集默认采用纯训练划分,所有片段均可直接用于训练操作策略。用户可通过LeRobot库的DataLoader加载Parquet文件中的动作与状态序列,并结合MP4视频帧作为视觉输入。结构化特征命名遵循机器人学惯例(如shoulder_pan.pos),支持用户按需提取特定关节变量。同时,数据分块存储的架构允许分批次流式读取,为在资源受限环境下开展模仿学习实验提供了灵活的数据访问接口。
背景与挑战
背景概述
在机器人学习领域,模仿学习因具备从人类示范中直接习得行为策略的能力而备受关注,但其效果高度依赖于高质量、多样化的演示数据集。makermods_bottle_settler数据集诞生于这一背景下,由HuggingFace的LeRobot社区创建,旨在为机器人操作技能的学习提供标准化训练资源。该数据集围绕单一任务——瓶子摆放(bottle settling)展开,记录了SO-101型机械臂在51个演示回合中的动作序列与视觉观测,包含超过5万帧同步数据。尽管规模有限,但其结构化的数据格式(涵盖6维关节动作、状态与640×480分辨率视频)为研究从视觉输入到精细操控的映射关系提供了基础性样本。作为LeRobot生态系统的一部分,该数据集推动了低成本、可复现的机器人学习研究,尤其适用于验证小样本模仿学习算法的效果。
当前挑战
该数据集所面临的核心挑战首先源于领域任务本身的复杂性:瓶子摆放要求机械臂在无固定环境约束下完成精确的物体姿态调整,涉及灵巧抓取、力觉感知与稳定性控制,而数据集仅采用位置控制模式,缺乏力矩或触觉反馈,难以应对物体几何与表面摩擦系数的变化。其次,构建过程中的数据采集限制显著——仅依靠人类遥操作演示,51段轨迹的多样性有限,无法覆盖失败案例或极端场景;同时,单任务、单机器人平台(SO-101)的设定导致模型泛化能力脆弱,当迁移至不同构型机械臂或光照条件时性能锐减。此外,数据集未提供深度视觉或点云信息,限制了其在三维空间推理中的适用性,且缺失后续的成功率标注,使得策略改进缺乏量化评估基准。
常用场景
经典使用场景
在机器人操作与模仿学习领域,makermods_bottle_settler数据集聚焦于“瓶子放置”这一精细操作任务,是验证和训练机器人从视觉输入到动作映射能力的经典基准。该数据集包含51个示范轨迹,每个轨迹由约1000帧的高频时序数据构成,涵盖6自由度的关节位置指令与同步的640×480分辨率摄像头图像。研究者常利用此数据集训练基于行为克隆或逆强化学习的策略,使机器人学会通过视觉反馈闭环地调整机械臂与夹爪的运动,从而将瓶子稳定地放置在指定位置。其标准化格式与LeRobot框架的兼容性,使得该数据集成为复现和对比各类模仿学习算法效果的重要测试平台。
衍生相关工作
该数据集作为LeRobot生态下的公开资源,促进了多项衍生研究工作的开展。首先是基于扩散策略的机器人动作生成——研究者将数据集中的轨迹数据转化为条件扩散模型的学习对象,成功生成平滑且符合几何约束的放置动作。其次是多任务迁移学习的探索,通过在此数据集上预训练的视觉编码器,结合少量新任务的演示数据即可快速适配到不同形状物体的抓取场景。此外还有关于“时序对比学习”的工作,该工作利用本数据集的密集帧序列设计了正负样本构造策略,显著提升了机器人对操作阶段中关键状态(如即将释放的瞬间)的识别精度。
数据集最近研究
最新研究方向
在机器人操作领域,精细操控能力的提升始终是前沿研究的核心课题。makermods_bottle_settler数据集聚焦于瓶子放置这一精准任务,依托LeRobot框架采集了51个示范片段的51,029帧数据,涵盖六自由度机械臂及夹爪的动作序列与视觉观测。这一数据集为模仿学习与行为克隆提供了高质量的多模态训练素材,尤其契合当前具身智能研究中从演示中学习操作技能的范式。随着工业自动化和家庭服务机器人的需求激增,此类针对特定任务的精细化数据集正成为推动机器人感知与执行闭环发展的关键基石,其影响辐射至非结构化环境下的自主决策与鲁棒控制等热点方向。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务