AIcell/MOSSBench

人类容易受到认知扭曲的影响，即在特定刺激下产生夸大的反应，尽管这些刺激在不同的背景下。MOSSBench数据集展示了高级多模态语言模型（MLLMs）也表现出类似的倾向。尽管这些模型设计用于在安全机制下响应查询，但它们有时会在某些视觉刺激下拒绝无害查询，忽视了这些查询的良性背景。

原始信息汇总

数据集概述

数据集信息

• 特征列表:
  • pid: 字符串类型
  • question: 字符串类型
  • image: 图像类型
  • short description: 字符串类型
  • description: 字符串类型
  • metadata_over: 布尔类型
  • metadata_human: 布尔类型
  • metadata_child: 布尔类型
  • metadata_syn: 布尔类型
  • metadata_ocr: 布尔类型
  • metadata_harm: 字符串类型

任务类别

• 视觉问答 (visual-question-answering)

语言

• 英语 (en)

数据集名称

• MOSSBench

数据集大小

• 样本数量小于1K (n<1K)

标签

• croissant