multi_modality_test

该数据集是一个机器人相关的数据集，包含6个episodes，2543帧，18个视频。数据集主要用于机器人动作和状态观察的研究，特征包括动作（action）、观察状态（observation.state）、多个视角的图像观察（observation.images.top、observation.images.side、observation.images.wrist）以及时间戳和索引信息。

原始信息汇总

数据集概述

基本信息

• 许可证: apache-2.0
• 任务类别: robotics
• 标签: LeRobot, tutorial

数据集描述

• 主页: [More Information Needed]
• 论文: [More Information Needed]

数据集结构

• 数据文件: data//.parquet
• 元数据文件: meta/info.json

元数据详情

• 代码库版本: v2.0
• 机器人类型: koch
• 总集数: 6
• 总帧数: 2543
• 总任务数: 1
• 总视频数: 18
• 总块数: 1
• 块大小: 1000
• 帧率: 30 fps
• 数据路径: data/chunk-{episode_chunk:03d}/episode_{episode_index:06d}.parquet
• 视频路径: videos/chunk-{episode_chunk:03d}/{video_key}/episode_{episode_index:06d}.mp4

特征

• action
  • 数据类型: float32
  • 形状: [6]
  • 名称: main_shoulder_pan, main_shoulder_lift, main_elbow_flex, main_wrist_flex, main_wrist_roll, main_gripper
• observation.state
  • 数据类型: float32
  • 形状: [6]
  • 名称: 同action
• observation.images.top
  • 数据类型: video
  • 形状: [480, 640, 3]
  • 名称: height, width, channels
  • 视频信息: fps=30.0, height=480, width=640, channels=3, codec=av1, pix_fmt=yuv420p, is_depth_map=false, has_audio=false
• observation.images.side
  • 同observation.images.top
• observation.images.wrist
  • 同observation.images.top
• timestamp
  • 数据类型: float32
  • 形状: [1]
• frame_index
  • 数据类型: int64
  • 形状: [1]
• episode_index
  • 数据类型: int64
  • 形状: [1]
• index
  • 数据类型: int64
  • 形状: [1]
• task_index
  • 数据类型: int64
  • 形状: [1]

引用

• BibTeX: [More Information Needed]