ZongyuWu/RePlus

RePlus数据集是一个用于重新审视语言先验在大型视觉语言模型（LVLM）幻觉中作用的基准数据集。该数据集包含图像-问题对，这些问题对具有模糊性和挑战性，分为两类：一类是难以在没有语言先验的情况下回答的问题，另一类是不可能在没有语言先验的情况下回答的问题。数据集的特征包括提示、图像、标签、类别和图像路径，并且有多个分割，如Hard_Yes、Hard_No、Impossible_External_A等。

The RePlus dataset is a new benchmark for assessing the role of language priors in Large Vision-Language Models. It includes two categories of questions: one that is hard to answer without language priors to aid in understanding ambiguous visual information, and another that is nearly impossible to answer without language priors to provide necessary external knowledge. The dataset is characterized by each image-question pair being ambiguous and challenging, to demonstrate the positive role of language priors.

原始信息汇总

数据集概述

基本信息

• 语言: 英语
• 许可证: CC BY 4.0
• 数据集大小: 1K<n<10K
• 任务类别: 视觉问答

数据集结构

特征

• prompt: 字符串
• image: 图像
• label: 字符串
• class: 字符串
• image_path: 字符串

分割

• Hard_Yes: 400个样本, 93537570.0字节
• Hard_No: 400个样本, 93538595.0字节
• Impossible_External_A: 600个样本, 499315181.0字节
• Impossible_External_B: 600个样本, 499314229.0字节
• Impossible_Internal_A: 300个样本, 96001079.0字节
• Impossible_Internal_B: 300个样本, 96000978.0字节

下载与数据集大小

• 下载大小: 876225799字节
• 数据集大小: 1377707632.0字节

配置

• 默认配置
  • Hard_Yes: data/Hard_Yes-*
  • Hard_No: data/Hard_No-*
  • Impossible_External_A: data/Impossible_External_A-*
  • Impossible_External_B: data/Impossible_External_B-*
  • Impossible_Internal_A: data/Impossible_Internal_A-*
  • Impossible_Internal_B: data/Impossible_Internal_B-*