Kaining/MMT-Bench

Name: Kaining/MMT-Bench
Creator: Kaining
Published: 2024-06-21 10:38:23
License: 暂无描述

Hugging Face2024-06-21 更新2024-05-25 收录

下载链接：

https://hf-mirror.com/datasets/Kaining/MMT-Bench

下载链接

链接失效反馈

官方服务：

资源简介：

--- license: mit ---

提供机构：

Kaining

原始信息汇总

数据集概述

许可证信息

许可证类型: MIT

MMT-Bench

MMT-Bench是一个综合基准，旨在通过大量需要专业知识和精细视觉识别、定位、推理及规划的多模态任务来评估大型视觉-语言模型。该数据集包含31,325个精心策划的多选视觉问题，来自车辆驾驶和实体导航等多种多模态场景，涵盖32个核心元任务和162个子任务。

arXiv2024-04-25 更新90

OpenGVLab/MMT-Bench

MMT-Bench是一个全面的多模态基准测试数据集，旨在评估大型视觉语言模型（LVLMs）在需要专家知识和视觉识别、定位及推理的多模态任务中的表现。该数据集包含31,325个精心策划的多项选择视觉问题，涵盖了32个核心元任务和162个子任务，涉及车辆驾驶和具身导航等多种多模态场景。数据集分为四个文件，分别用于本地模型评估和服务器评估，并提供了处理多图像任务的不同方式。

Hugging Face2024-06-24 更新810

CMKL/MMT-Bench_VAL_TH

--- license: apache-2.0 ---

Hugging Face2025-06-20 更新40

MMT-Bench

该数据集名为MMT-Bench，旨在评估多模态大型语言模型（MLLMs）的通用能力。该基准测试强调了提示敏感性和定制化对于准确评估模型性能的重要性。在规模方面，其子集MMT-S包含了跨越19个类别的83项任务，旨在对多模态模型在各类任务中的能力进行评估。

arXiv260

mm-eval/MMT-Bench

该数据集包含3126个样本，每个样本具有id（字符串类型）、media（图像列表）和messages（字符串类型）特征。数据集仅包含val分割，总大小约为795MB，下载大小约为773MB。

Hugging Face2026-05-26 更新10