Thanmay/commonsense_qa-translated

---
dataset_info:
- config_name: en
features:
- name: id
dtype: string
- name: question
dtype: string
- name: question_concept
dtype: string
- name: choices
sequence:
- name: label
dtype: string
- name: text
dtype: string
- name: answerKey
dtype: string
splits:
- name: test
num_bytes: 257842
num_examples: 1140
- name: validation
num_bytes: 273848
num_examples: 1221
download_size: 311467
dataset_size: 531690
- config_name: gu
features:
- name: id
dtype: string
- name: question_concept
dtype: string
- name: answerKey
dtype: string
- name: question
dtype: string
- name: choices
struct:
- name: label
sequence: string
- name: text
sequence: string
splits:
- name: validation
num_bytes: 509284
num_examples: 1221
- name: test
num_bytes: 481005
num_examples: 1140
download_size: 411754
dataset_size: 990289
- config_name: hi
features:
- name: id
dtype: string
- name: question_concept
dtype: string
- name: answerKey
dtype: string
- name: question
dtype: string
- name: choices
struct:
- name: label
sequence: string
- name: text
sequence: string
splits:
- name: validation
num_bytes: 519155
num_examples: 1221
- name: test
num_bytes: 490275
num_examples: 1140
download_size: 410911
dataset_size: 1009430
- config_name: ml
features:
- name: id
dtype: string
- name: question_concept
dtype: string
- name: answerKey
dtype: string
- name: question
dtype: string
- name: choices
struct:
- name: label
sequence: string
- name: text
sequence: string
splits:
- name: validation
num_bytes: 611370
num_examples: 1221
- name: test
num_bytes: 579108
num_examples: 1140
download_size: 453273
dataset_size: 1190478
- config_name: mr
features:
- name: id
dtype: string
- name: question_concept
dtype: string
- name: answerKey
dtype: string
- name: question
dtype: string
- name: choices
struct:
- name: label
sequence: string
- name: text
sequence: string
splits:
- name: validation
num_bytes: 523687
num_examples: 1221
- name: test
num_bytes: 495642
num_examples: 1140
download_size: 417463
dataset_size: 1019329
- config_name: ta
features:
- name: id
dtype: string
- name: question_concept
dtype: string
- name: answerKey
dtype: string
- name: question
dtype: string
- name: choices
struct:
- name: label
sequence: string
- name: text
sequence: string
splits:
- name: validation
num_bytes: 621423
num_examples: 1221
- name: test
num_bytes: 588898
num_examples: 1140
download_size: 445098
dataset_size: 1210321
configs:
- config_name: en
data_files:
- split: test
path: en/test-*
- split: validation
path: en/validation-*
- config_name: gu
data_files:
- split: validation
path: gu/validation-*
- split: test
path: gu/test-*
- config_name: hi
data_files:
- split: validation
path: hi/validation-*
- split: test
path: hi/test-*
- config_name: ml
data_files:
- split: validation
path: ml/validation-*
- split: test
path: ml/test-*
- config_name: mr
data_files:
- split: validation
path: mr/validation-*
- split: test
path: mr/test-*
- config_name: ta
data_files:
- split: validation
path: ta/validation-*
- split: test
path: ta/test-*
---

原始信息汇总

数据集概述

配置信息

英文配置 (en)

• 特征:
  • id: 字符串类型
  • question: 字符串类型
  • question_concept: 字符串类型
  • choices: 序列类型，包含以下字段:
    • label: 字符串类型
    • text: 字符串类型
  • answerKey: 字符串类型
• 分割:
  • test: 257842 字节，1140 个样本
  • validation: 273848 字节，1221 个样本
• 下载大小: 311467 字节
• 数据集大小: 531690 字节

古吉拉特语配置 (gu)

• 特征:
  • id: 字符串类型
  • question_concept: 字符串类型
  • answerKey: 字符串类型
  • question: 字符串类型
  • choices: 结构类型，包含以下字段:
    • label: 序列类型，字符串
    • text: 序列类型，字符串
• 分割:
  • validation: 509284 字节，1221 个样本
  • test: 481005 字节，1140 个样本
• 下载大小: 411754 字节
• 数据集大小: 990289 字节

印地语配置 (hi)

• 特征:
  • id: 字符串类型
  • question_concept: 字符串类型
  • answerKey: 字符串类型
  • question: 字符串类型
  • choices: 结构类型，包含以下字段:
    • label: 序列类型，字符串
    • text: 序列类型，字符串
• 分割:
  • validation: 519155 字节，1221 个样本
  • test: 490275 字节，1140 个样本
• 下载大小: 410911 字节
• 数据集大小: 1009430 字节

马拉雅拉姆语配置 (ml)

• 特征:
  • id: 字符串类型
  • question_concept: 字符串类型
  • answerKey: 字符串类型
  • question: 字符串类型
  • choices: 结构类型，包含以下字段:
    • label: 序列类型，字符串
    • text: 序列类型，字符串
• 分割:
  • validation: 611370 字节，1221 个样本
  • test: 579108 字节，1140 个样本
• 下载大小: 453273 字节
• 数据集大小: 1190478 字节

马拉地语配置 (mr)

• 特征:
  • id: 字符串类型
  • question_concept: 字符串类型
  • answerKey: 字符串类型
  • question: 字符串类型
  • choices: 结构类型，包含以下字段:
    • label: 序列类型，字符串
    • text: 序列类型，字符串
• 分割:
  • validation: 523687 字节，1221 个样本
  • test: 495642 字节，1140 个样本
• 下载大小: 417463 字节
• 数据集大小: 1019329 字节

泰米尔语配置 (ta)

• 特征:
  • id: 字符串类型
  • question_concept: 字符串类型
  • answerKey: 字符串类型
  • question: 字符串类型
  • choices: 结构类型，包含以下字段:
    • label: 序列类型，字符串
    • text: 序列类型，字符串
• 分割:
  • validation: 621423 字节，1221 个样本
  • test: 588898 字节，1140 个样本
• 下载大小: 445098 字节
• 数据集大小: 1210321 字节

数据文件路径

• 英文配置 (en):
  • test: en/test-*
  • validation: en/validation-*
• 古吉拉特语配置 (gu):
  • validation: gu/validation-*
  • test: gu/test-*
• 印地语配置 (hi):
  • validation: hi/validation-*
  • test: hi/test-*
• 马拉雅拉姆语配置 (ml):
  • validation: ml/validation-*
  • test: ml/test-*
• 马拉地语配置 (mr):
  • validation: mr/validation-*
  • test: mr/test-*
• 泰米尔语配置 (ta):
  • validation: ta/validation-*
  • test: ta/test-*