bimanual_blue_block_handover_2

该数据集是由LeRobot创建的机器人学数据集，包含双手动操作和交接等任务的相关数据。数据集共有30个集，每个集包含多个视频和帧，数据以Parquet格式存储，并提供了相关的视频文件。具体的数据集描述在README中未提供。

原始信息汇总

数据集概述

基本信息

• 数据集名称: bimanual_blue_block_handover_2
• 任务类别: 机器人技术
• 标签: LeRobot、双手操作、交接、整合
• 许可证: Apache-2.0
• 创建工具: LeRobot

数据集规模

• 总任务数: 1
• 总片段数: 30
• 总帧数: 18613
• 总视频数: 90
• 数据块数: 1
• 数据块大小: 1000
• 帧率: 30 fps
• 训练集划分: 0:30

数据结构

数据文件路径

• 数据路径: data/chunk-{episode_chunk:03d}/episode_{episode_index:06d}.parquet
• 视频路径: videos/chunk-{episode_chunk:03d}/{video_key}/episode_{episode_index:06d}.mp4

特征描述

动作特征

• 数据类型: float32
• 维度: [12]
• 关节位置:
  • 左肩旋转
  • 左肩抬升
  • 左肘弯曲
  • 左腕弯曲
  • 左腕旋转
  • 左夹爪
  • 右肩旋转
  • 右肩抬升
  • 右肘弯曲
  • 右腕弯曲
  • 右腕旋转
  • 右夹爪

观测状态

• 数据类型: float32
• 维度: [12]
• 关节位置: 与动作特征相同的12个关节

图像观测

右手腕摄像头:

• 数据类型: 视频
• 分辨率: 480×640×3
• 视频编码: AV1
• 像素格式: yuv420p
• 非深度图

左手腕摄像头:

• 数据类型: 视频
• 分辨率: 480×640×3
• 视频编码: AV1
• 像素格式: yuv420p
• 非深度图

顶部RealSense摄像头:

• 数据类型: 视频
• 分辨率: 480×640×3
• 视频编码: AV1
• 像素格式: yuv420p
• 非深度图

元数据

• 时间戳: float32[1]
• 帧索引: int64[1]
• 片段索引: int64[1]
• 索引: int64[1]
• 任务索引: int64[1]

技术规格

• 机器人类型: bi_so101_follower
• 代码库版本: v2.1
• 所有视频均无音频

搜集汇总

数据集介绍

构建方式

在机器人操作研究领域，bimanual_blue_block_handover_2数据集通过LeRobot平台系统构建，采用双手机器人bi_so101_follower执行单一任务，共采集30个完整交互序列，形成18613帧数据。数据以分块存储方式组织，每块包含1000帧，并以30帧每秒的速率记录多视角视频与关节状态，确保时序一致性与完整性。

特点

该数据集显著特点在于其多模态数据融合，涵盖12维双手机器人关节动作与状态向量，并集成三路视觉信息：左右腕部摄像头及顶部RealSense视角，均以480x640分辨率RGB格式呈现。数据结构采用标准化Parquet格式，支持高效存取与并行处理，为双手协作研究提供丰富时空上下文。

使用方法

研究者可通过加载指定路径的Parquet文件直接访问结构化数据，利用帧索引与时间戳实现精确时序对齐。视频数据遵循MP4封装标准，配合元数据中传感器标定参数，适用于模仿学习、动作生成等算法验证。训练集覆盖全部30个交互情景，支持端到端机器人控制策略开发。

背景与挑战

背景概述

在机器人操作领域，双手机器人协同作业是实现复杂任务的关键技术。bimanual_blue_block_handover_2数据集由LeRobot研究团队构建，专注于双手机器人之间的物体传递任务。该数据集通过记录30个完整交互序列，包含18613帧多视角视觉数据与12维关节控制指令，为研究双臂协调控制与动态物体交接提供了标准化实验平台。其采用Apache 2.0开源协议，通过结构化存储的关节状态、视觉观测与时间戳数据，显著推进了机器人灵巧操作的研究进程。

当前挑战

双手机器人物体传递面临动作时序同步与空间轨迹规划的复合挑战，需解决双臂运动学约束下的避碰问题与动态接触力控制。数据集构建过程中，多传感器数据同步采集涉及视觉帧率对齐与机械臂状态标定，高维动作空间的连续轨迹标注需要精确的时间戳对齐。此外，不同视角视频数据的压缩存储与实时解析，对计算资源与数据管道设计提出了严格要求，这些技术难点共同构成了该领域研究的核心障碍。

常用场景

经典使用场景

在机器人协作领域，bimanual_blue_block_handover_2数据集为研究双手机器人间的物体传递任务提供了关键支持。该数据集通过记录双机械臂在传递蓝色积木过程中的关节位置、夹爪状态及多视角视觉数据，成为训练机器人协同控制算法的经典基准。其丰富的动作轨迹与同步视觉观测，使得研究者能够深入分析双臂协调运动的动态特性，为机器人精细操作任务奠定数据基础。

实际应用

在工业自动化与服务机器人领域，该数据集具有重要的实践价值。基于其构建的算法模型可应用于智能制造中的精密装配流水线，实现零部件的安全传递与精准对接。在医疗辅助场景中，此类技术能支撑手术机器人完成器械递送等协作任务。数据集蕴含的双臂协调策略还可迁移至家庭服务机器人，使其具备处理日常物品传递的能力，推动机器人融入人类生活场景的进程。

衍生相关工作

该数据集催生了系列创新性研究，特别是在LeRobot生态系统中衍生出多类算法改进。基于其双机械臂交互数据开发的层次化强化学习框架，显著提升了机器人动作生成的平滑性与可靠性。相关研究还拓展至跨模态表征学习领域，通过融合关节运动数据与视觉信息构建了更鲁棒的意图识别模型。这些工作不仅深化了对机器人双手操作机理的理解，更为构建通用型协作机器人系统提供了技术储备。