glitchbench/GlitchBench
收藏Hugging Face2024-02-27 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/glitchbench/GlitchBench
下载链接
链接失效反馈官方服务：
资源简介：
GlitchBench是一个新颖的基准测试数据集，旨在测试和评估大型多模态模型在视频游戏内容中的常识推理和视觉识别能力。该数据集从各种不寻常、罕见和故障的视频游戏场景中精心挑选，旨在挑战大型多模态模型在检测和解释异常事件和场景构成方面的视觉和语言推理能力。
GlitchBench is a novel benchmark dataset designed to test and evaluate the commonsense reasoning and visual recognition capabilities of large multimodal models (LMMs) in the context of video game content. This dataset is carefully curated from a variety of unusual, rare, and glitchy video game scenarios, aiming to challenge the visual and linguistic reasoning abilities of large multimodal models when detecting and interpreting anomalous events and scene compositions.
提供机构：
glitchbench
原始信息汇总
数据集概述
数据集信息
特征
- image: 图像数据
- id: 字符串
- reddit: 字符串
- glitch-type: 字符串
- game: 字符串
- source: 字符串
- description: 字符串
- index_level_0: 整数
数据分割
- validation:
- 字节数: 686309290
- 样本数: 607
数据大小
- 下载大小: 686303027
- 数据集大小: 686309290
许可证
- MIT
任务类别
- image-to-text
语言
- 英语
标签
- Video Game
- Glitch
数据集名称
- GlitchBench
数据集规模
- n<1K
