遇见数据集

dillonlyr04/eval_final_k100_vf

收藏
Hugging Face2026-05-27 更新2026-05-31 收录
官方服务:

资源简介:

该数据集是一个机器人演示数据集,使用LeRobot框架创建,专门针对名为bi_so100_follower的双臂机器人系统。数据集包含1个完整episode、578个时间帧和1个任务,总数据文件大小为100MB,视频文件大小为200MB。数据以parquet格式存储,视频为MP4格式,帧率为30fps。数据集提供了机器人动作和状态信息,包括左右机械臂各6个关节(共12个关节)的位置数据,以及三个摄像头视角的视频观测:全局顶部视角、左臂视角和右臂视角,每个视频的分辨率为1280x720。数据集适用于机器人控制、模仿学习或强化学习任务。

This dataset is a robotic demonstration dataset created using the LeRobot framework, specifically for a dual-arm robot system named bi_so100_follower. It contains 1 full episode, 578 timesteps, and 1 task, with a total data file size of 100MB and video file size of 200MB. Data is stored in parquet format, videos are in MP4 format with a frame rate of 30fps. The dataset provides robot action and state information, including position data for 12 joints (6 joints per arm), and video observations from three camera perspectives: global top view, left arm view, and right arm view, each with a resolution of 1280x720. The dataset is suitable for robotics control, imitation learning, or reinforcement learning tasks.

提供机构:
dillonlyr04
搜集汇总
数据集介绍
dillonlyr04/eval_final_k100_vf 数据集图片
构建方式
该数据集基于LeRobot框架构建,旨在服务于机器人学习领域的研究。数据采集自一款名为bi_so100_follower的双臂机器人,其构造涉及单次任务的完整执行,总计包含1个独立episode和578帧连续数据,帧率设定为30fps。数据集采用高效的数据组织方式,将结构化数据以Parquet格式分块存储于data/目录下,同时将对任务理解至关重要的高分辨率视频流(720×1280像素)以H.264编码独立保存于videos/目录中,确保了数据加载的灵活性与效率。
特点
数据集的核心特点在于其多维度的信息融合与精细化的动作表征。其观测空间不仅包含12自由度的连续关节状态(如左右臂的肩、肘、腕关节及夹爪位置),还集成了三个视角的视觉输入,分别是全局视野及左右臂专用摄像头,为模仿学习提供了丰富的上下文。动作空间与状态空间维度一致,有利于研究从状态到动作的直接映射。记录了包括时间戳、帧索引等辅助元数据,且默认将全部数据划分为训练集,便于开展端到端的学习实验。
使用方法
此数据集专为与LeRobot生态系统集成而设计,使用户能够通过加载Parquet和视频文件快速开展机器人模仿学习或行为克隆任务。在代码中,推荐采用LeRobot提供的Dataset类直接读取,利用其内置的迭代器高效获取每帧的观测、动作及状态元组。由于数据格式遵循了标准化协议,研究者无需关注底层存储细节,即可便捷地将数据用于训练策略网络,或进行跨episode的行为分析,从而加速机器人学习算法的研发迭代。
背景与挑战
背景概述
eval_final_k100_vf数据集诞生于机器人学习与模仿学习迅猛发展的时代,由Hugging Face的LeRobot社区构建,创建时间虽未明确标注,但依托于LeRobot框架的成熟生态,旨在为双臂协作机器人提供标准化训练与评估数据。该数据集聚焦于一个核心研究问题:如何通过高保真的多模态观测数据(包括12维关节状态与多视角高清视频)驱动机器人完成精细操作任务。尽管样本规模较小(仅有1个任务、578帧),但其数据格式严格遵循LeRobot协议,支持高效的并行化加载与训练,为后续大规模机器人数据集的基准测试与迁移学习研究奠定了基础。数据集采用Apache-2.0开源许可,降低了学术与工业应用的门槛,对推动灵巧操作领域的标准化评估具有示范意义。
当前挑战
该数据集面临的首要挑战是领域内长期存在的数据稀缺与泛化难题。仅包含单个任务与单次运行轨迹,难以支撑机器人对复杂环境变化的适应能力,数据量级与多样性严重不足,限制了模型的鲁棒性训练。构建过程中,需同步采集左右臂各6自由度关节角度与三路高清视频(720p@30fps),这对硬件同步精度与存储带宽提出了严格要求;同时,原始数据需经过时间戳对齐、帧索引重排、视频编解码(H.264)与Parquet结构化存储等多重转换,每一步都可能引入噪声或信息损失。此外,缺乏论文或公开测试基准,使得该数据集在公平比较与反复验证中面临阻力,阻碍了其作为通用参考标准的广泛采纳。
常用场景
经典使用场景
在机器人操作与模仿学习领域,eval_final_k100_vf数据集以其精细化的双臂协作数据而备受青睐。该数据集记录了基于bi_so100_follower机器人平台的完整操作轨迹,包含12维关节状态与动作指令,以及来自全局、左臂和右臂三个视角的高清视觉观测。研究者可将其用于训练端到端的机器人控制策略,尤其是基于视觉输入直接映射到关节空间动作的模仿学习任务,为双臂协同操作研究提供了标准化的数据基准。
实际应用
在实际应用层面,eval_final_k100_vf数据集直接服务于工业与服务业中的双臂协作机器人部署。例如,在精密装配、物品分拣或医疗辅助等场景中,基于该数据集训练的模型能够学习到多关节协同运动模式,从而实现从视觉感知到动作执行的精准闭环控制。数据集中包含的全局与局部摄像头视角,特别适合用于开发鲁棒的视觉伺服系统,推动机器人从实验室环境走向复杂真实世界的操作任务。
衍生相关工作
该数据集衍生了一系列重要的机器人学习研究工作,包括但不限于基于扩散策略的机器人动作生成、多视角表征学习在模仿学习中的应用,以及利用预训练-微调范式提升机器人数据利用效率的方法。通过LeRobot框架的标准化处理,该数据集成为验证动作分块、时间序列建模和视觉运动控制等新算法的基准测试平台。其公开的数据格式还催生了多种数据增强与仿真迁移工具,加速了算法从仿真到真机的部署迭代。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务