five

pkulium/D-SQA

收藏
Hugging Face2024-05-16 更新2024-06-12 收录
下载链接:
https://hf-mirror.com/datasets/pkulium/D-SQA
下载链接
链接失效反馈
官方服务:
资源简介:
这是一个基于[derek-thomas/ScienceQA](https://huggingface.co/datasets/derek-thomas/ScienceQA)的分散版本数据集,用于`lmms-eval`管道中以一键评估大型多模态模型。数据集包含四个不同的配置(D-SQA-AC, D-SQA-AI, D-SQA-IC, D-SQA-II),每个配置包含图像、问题、选择、答案等特征,并且每个配置都有一个包含2000个样本的测试集。

这是一个基于[derek-thomas/ScienceQA](https://huggingface.co/datasets/derek-thomas/ScienceQA)的分散版本数据集,用于`lmms-eval`管道中以一键评估大型多模态模型。数据集包含四个不同的配置(D-SQA-AC, D-SQA-AI, D-SQA-IC, D-SQA-II),每个配置包含图像、问题、选择、答案等特征,并且每个配置都有一个包含2000个样本的测试集。
提供机构:
pkulium
原始信息汇总

数据集概述

数据集配置

  1. D-SQA-AC

    • 特征:
      • image: 图片
      • question: 字符串
      • choices: 字符串序列
      • answer: 8位整数
      • hint: 字符串
      • task: 字符串
      • grade: 字符串
      • subject: 字符串
      • topic: 字符串
      • category: 字符串
      • skill: 字符串
      • lecture: 字符串
      • solution: 字符串
      • distraction_type: 字符串
    • 分割:
      • test: 2000个样本
  2. D-SQA-AI

    • 特征:
      • image: 图片
      • question: 字符串
      • choices: 字符串序列
      • answer: 8位整数
      • hint: 字符串
      • task: 字符串
      • grade: 字符串
      • subject: 字符串
      • topic: 字符串
      • category: 字符串
      • skill: 字符串
      • lecture: 字符串
      • solution: 字符串
    • 分割:
      • test: 2000个样本
  3. D-SQA-IC

    • 特征:
      • image: 图片
      • question: 字符串
      • choices: 字符串序列
      • answer: 8位整数
      • hint: 字符串
      • task: 字符串
      • grade: 字符串
      • subject: 字符串
      • topic: 字符串
      • category: 字符串
      • skill: 字符串
      • lecture: 字符串
      • solution: 字符串
      • distraction_type: 字符串
    • 分割:
      • test: 2000个样本
  4. D-SQA-II

    • 特征:
      • image: 图片
      • question: 字符串
      • choices: 字符串序列
      • answer: 8位整数
      • hint: 字符串
      • task: 字符串
      • grade: 字符串
      • subject: 字符串
      • topic: 字符串
      • category: 字符串
      • skill: 字符串
      • lecture: 字符串
      • solution: 字符串
      • distraction_type: 字符串
    • 分割:
      • test: 2000个样本

数据文件

  • D-SQA-AC
    • 测试数据路径: D-SQA-AC/test-*
  • D-SQA-AI
    • 测试数据路径: D-SQA-AI/test-*
  • D-SQA-IC
    • 测试数据路径: D-SQA-IC/test-*
  • D-SQA-II
    • 测试数据路径: D-SQA-II/test-*
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作