lmms-lab/SEED-Bench-2

这是一个格式化版本的SEED-Bench-2数据集，用于`lmms-eval`管道中，以便一键评估大型多模态模型。数据集包含答案、选项、问题、问题类型、图像等特征，主要用于评估大规模多模态模型。

原始信息汇总

数据集概述

数据集信息

特征

• answer: 类型为字符串
• choice_a: 类型为字符串
• choice_b: 类型为字符串
• choice_c: 类型为字符串
• choice_d: 类型为字符串
• data_id: 序列类型为字符串
• data_type: 类型为字符串
• data_source: 类型为字符串
• level: 类型为字符串
• question: 类型为字符串
• question_id: 类型为字符串
• question_type_id: 类型为整数16位
• image: 序列类型为图像
• subpart: 类型为字符串
• version: 类型为字符串

分割

• test: 包含24371个样本，占用41770062282.022字节

大小

• 下载大小: 38037968494字节
• 数据集大小: 41770062282.022字节

配置

• config_name: default
  • data_files:
    • split: test
    • path: data/test-*