TIGER-Lab/VideoScore-Bench

VideoFeedback-Bench数据集来源于四个基准或数据集：VideoFeedback、EvalCrafter、GenAI-Bench和VBench。每个子数据集包含不同的特征，如id、images、conversations、score_list等，并且每个子数据集都有一个测试集分割。

VideoFeedback-Bench is derived from four benchmarks or datasets: VideoFeedback, EvalCrafter, GenAI-Bench and VBench. Each sub-dataset contains different features such as id, images, conversations, score_list, etc., and each sub-dataset has a test split.

原始信息汇总

数据集概述

数据集配置

eval_crafter

• 特征:
  • id: 字符串
  • images: 字符串序列
  • conversations: 列表，包含 from（字符串）和 value（字符串）
  • score_list: 浮点数序列
• 分割:
  • test: 2541个样本，7275877字节
• 下载大小: 1153703字节
• 数据集大小: 7275877字节

genaibench

• 特征:
  • id: 字符串
  • images: 字符串序列
  • score_list: 整数序列
  • conversations: 列表，包含 from（字符串）和 value（字符串）
  • preference: 浮点数
• 分割:
  • test: 2138个样本，3847467字节
• 下载大小: 312979字节
• 数据集大小: 3847467字节

vbench

• 特征:
  • id: 字符串
  • images: 字符串序列
  • score_list: 整数序列
  • conversations: 列表，包含 from（字符串）和 value（字符串）
  • preference: 结构体，包含 cogvideo（浮点数）、lavie（浮点数）、modelscope（浮点数）、videocraft（浮点数）
• 分割:
  • test: 2000个样本，4743330字节
• 下载大小: 340207字节
• 数据集大小: 4743330字节

video_feedback

• 特征:
  • id: 字符串
  • images: 字符串序列
  • text prompt: 字符串
  • video link: 字符串
  • visual quality: 整数
  • temporal consistency: 整数
  • dynamic degree: 整数
  • text-to-video alignment: 整数
  • factual consistency: 整数
  • conversations: 列表，包含 from（字符串）和 value（字符串）
• 分割:
  • test: 760个样本，1481750字节
• 下载大小: 264137字节
• 数据集大小: 1481750字节

数据文件路径

• eval_crafter: eval_crafter/test-*
• genaibench: genaibench/test-*
• vbench: vbench/test-*
• video_feedback: video_feedback/test-*