arcee-globe/AlGhafa-Arabic-LLM-Benchmark-Translated-10percent

---
dataset_info:
- config_name: arc_challenge_okapi_ar
features:
- name: query
dtype: string
- name: sol1
dtype: string
- name: sol2
dtype: string
- name: sol3
dtype: string
- name: sol4
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 1780
num_examples: 5
- name: test
num_bytes: 47840.7
num_examples: 116
download_size: 38599
dataset_size: 49620.7
- config_name: arc_easy_ar
features:
- name: query
dtype: string
- name: sol1
dtype: string
- name: sol2
dtype: string
- name: sol3
dtype: string
- name: sol4
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 1712
num_examples: 5
- name: test
num_bytes: 83127.70558375634
num_examples: 236
download_size: 55168
dataset_size: 84839.70558375634
- config_name: boolq_ar
features:
- name: question
dtype: string
- name: passage
dtype: string
- name: answer
dtype: bool
splits:
- name: validation
num_bytes: 3499
num_examples: 5
- name: test
num_bytes: 310251.4
num_examples: 326
download_size: 167299
dataset_size: 313750.4
- config_name: copa_ext_ar
features:
- name: premise
dtype: string
- name: choice1
dtype: string
- name: choice2
dtype: string
- name: question
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 828
num_examples: 5
- name: test
num_bytes: 1453.4
num_examples: 9
download_size: 8536
dataset_size: 2281.4
- config_name: hellaswag_okapi_ar
features:
- name: ind
dtype: int64
- name: activity_label
dtype: string
- name: ctx_a
dtype: string
- name: ctx_b
dtype: string
- name: ctx
dtype: string
- name: endings
dtype: string
- name: source_id
dtype: string
- name: split
dtype: string
- name: split_type
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 8730
num_examples: 5
- name: test
num_bytes: 1504394.1439319595
num_examples: 917
download_size: 749801
dataset_size: 1513124.1439319595
- config_name: mmlu_okapi_ar
features:
- name: query
dtype: string
- name: sol1
dtype: string
- name: sol2
dtype: string
- name: sol3
dtype: string
- name: sol4
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 3506
num_examples: 5
- name: test
num_bytes: 784582.8213263174
num_examples: 1292
download_size: 453815
dataset_size: 788088.8213263174
- config_name: openbook_qa_ext_ar
features:
- name: query
dtype: string
- name: sol1
dtype: string
- name: sol2
dtype: string
- name: sol3
dtype: string
- name: sol4
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 1442
num_examples: 5
- name: test
num_bytes: 11047.272727272728
num_examples: 49
download_size: 17374
dataset_size: 12489.272727272728
- config_name: piqa_ar
features:
- name: query
dtype: string
- name: sol1
dtype: string
- name: sol2
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 1367
num_examples: 5
- name: test
num_bytes: 71674.20130932897
num_examples: 183
download_size: 45522
dataset_size: 73041.20130932897
- config_name: race_ar
features:
- name: query
dtype: string
- name: sol1
dtype: string
- name: sol2
dtype: string
- name: sol3
dtype: string
- name: sol4
dtype: string
- name: label
dtype: int64
splits:
- name: validation
num_bytes: 13808
num_examples: 5
- name: test
num_bytes: 1347575.423006695
num_examples: 492
download_size: 735957
dataset_size: 1361383.423006695
- config_name: sciq_ar
features:
- name: question
dtype: string
- name: distractor3
dtype: string
- name: distractor1
dtype: string
- name: distractor2
dtype: string
- name: correct_answer
dtype: string
- name: support
dtype: string
splits:
- name: validation
num_bytes: 4764
num_examples: 5
- name: test
num_bytes: 87654.50050251256
num_examples: 99
download_size: 64104
dataset_size: 92418.50050251256
- config_name: toxigen_ar
features:
- name: text
dtype: string
- name: target_group
dtype: string
- name: factual?
dtype: string
- name: ingroup_effect
dtype: string
- name: lewd
dtype: string
- name: framing
dtype: string
- name: predicted_group
dtype: string
- name: stereotyping
dtype: string
- name: intent
dtype: float64
- name: toxicity_ai
dtype: float64
- name: toxicity_human
dtype: float64
- name: predicted_author
dtype: string
- name: actual_method
dtype: string
splits:
- name: validation
num_bytes: 3029
num_examples: 5
- name: test
num_bytes: 53732.813903743314
num_examples: 93
download_size: 30768
dataset_size: 56761.813903743314
configs:
- config_name: arc_challenge_okapi_ar
data_files:
- split: validation
path: arc_challenge_okapi_ar/validation-*
- split: test
path: arc_challenge_okapi_ar/test-*
- config_name: arc_easy_ar
data_files:
- split: validation
path: arc_easy_ar/validation-*
- split: test
path: arc_easy_ar/test-*
- config_name: boolq_ar
data_files:
- split: validation
path: boolq_ar/validation-*
- split: test
path: boolq_ar/test-*
- config_name: copa_ext_ar
data_files:
- split: validation
path: copa_ext_ar/validation-*
- split: test
path: copa_ext_ar/test-*
- config_name: hellaswag_okapi_ar
data_files:
- split: validation
path: hellaswag_okapi_ar/validation-*
- split: test
path: hellaswag_okapi_ar/test-*
- config_name: mmlu_okapi_ar
data_files:
- split: validation
path: mmlu_okapi_ar/validation-*
- split: test
path: mmlu_okapi_ar/test-*
- config_name: openbook_qa_ext_ar
data_files:
- split: validation
path: openbook_qa_ext_ar/validation-*
- split: test
path: openbook_qa_ext_ar/test-*
- config_name: piqa_ar
data_files:
- split: validation
path: piqa_ar/validation-*
- split: test
path: piqa_ar/test-*
- config_name: race_ar
data_files:
- split: validation
path: race_ar/validation-*
- split: test
path: race_ar/test-*
- config_name: sciq_ar
data_files:
- split: validation
path: sciq_ar/validation-*
- split: test
path: sciq_ar/test-*
- config_name: toxigen_ar
data_files:
- split: validation
path: toxigen_ar/validation-*
- split: test
path: toxigen_ar/test-*
---

数据集信息：
- 配置名称：arc_challenge_okapi_ar（ARC挑战赛Okapi阿拉伯语版）
特征字段：
- 字段名：查询（query），数据类型：字符串（string）
- 字段名：候选答案1（sol1），数据类型：字符串（string）
- 字段名：候选答案2（sol2），数据类型：字符串（string）
- 字段名：候选答案3（sol3），数据类型：字符串（string）
- 字段名：候选答案4（sol4），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：1780，样本数量：5
- 划分名称：测试集（test），字节数：47840.7，样本数量：116
下载总大小：38599，数据集总存储大小：49620.7
- 配置名称：arc_easy_ar（ARC简单题阿拉伯语版）
特征字段：
- 字段名：查询（query），数据类型：字符串（string）
- 字段名：候选答案1（sol1），数据类型：字符串（string）
- 字段名：候选答案2（sol2），数据类型：字符串（string）
- 字段名：候选答案3（sol3），数据类型：字符串（string）
- 字段名：候选答案4（sol4），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：1712，样本数量：5
- 划分名称：测试集（test），字节数：83127.70558375634，样本数量：236
下载总大小：55168，数据集总存储大小：84839.70558375634
- 配置名称：boolq_ar（布尔问答（BoolQ）阿拉伯语版）
特征字段：
- 字段名：问题（question），数据类型：字符串（string）
- 字段名：文章段落（passage），数据类型：字符串（string）
- 字段名：答案（answer），数据类型：布尔值（bool）
数据集划分：
- 划分名称：验证集（validation），字节数：3499，样本数量：5
- 划分名称：测试集（test），字节数：310251.4，样本数量：326
下载总大小：167299，数据集总存储大小：313750.4
- 配置名称：copa_ext_ar（因果推断多选问答（COPA）扩展版阿拉伯语版）
特征字段：
- 字段名：前提（premise），数据类型：字符串（string）
- 字段名：选项1（choice1），数据类型：字符串（string）
- 字段名：选项2（choice2），数据类型：字符串（string）
- 字段名：问题（question），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：828，样本数量：5
- 划分名称：测试集（test），字节数：1453.4，样本数量：9
下载总大小：8536，数据集总存储大小：2281.4
- 配置名称：hellaswag_okapi_ar（Hellaswag Okapi阿拉伯语版）
特征字段：
- 字段名：序号（ind），数据类型：64位整数（int64）
- 字段名：活动标签（activity_label），数据类型：字符串（string）
- 字段名：上下文A（ctx_a），数据类型：字符串（string）
- 字段名：上下文B（ctx_b），数据类型：字符串（string）
- 字段名：完整上下文（ctx），数据类型：字符串（string）
- 字段名：结尾选项（endings），数据类型：字符串（string）
- 字段名：来源ID（source_id），数据类型：字符串（string）
- 字段名：划分标识（split），数据类型：字符串（string）
- 字段名：划分类型（split_type），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：8730，样本数量：5
- 划分名称：测试集（test），字节数：1504394.1439319595，样本数量：917
下载总大小：749801，数据集总存储大小：1513124.1439319595
- 配置名称：mmlu_okapi_ar（大规模多任务语言理解（MMLU）Okapi阿拉伯语版）
特征字段：
- 字段名：查询（query），数据类型：字符串（string）
- 字段名：候选答案1（sol1），数据类型：字符串（string）
- 字段名：候选答案2（sol2），数据类型：字符串（string）
- 字段名：候选答案3（sol3），数据类型：字符串（string）
- 字段名：候选答案4（sol4），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：3506，样本数量：5
- 划分名称：测试集（test），字节数：784582.8213263174，样本数量：1292
下载总大小：453815，数据集总存储大小：788088.8213263174
- 配置名称：openbook_qa_ext_ar（开放域问答（OpenBook QA）扩展版阿拉伯语版）
特征字段：
- 字段名：查询（query），数据类型：字符串（string）
- 字段名：候选答案1（sol1），数据类型：字符串（string）
- 字段名：候选答案2（sol2），数据类型：字符串（string）
- 字段名：候选答案3（sol3），数据类型：字符串（string）
- 字段名：候选答案4（sol4），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：1442，样本数量：5
- 划分名称：测试集（test），字节数：11047.272727272728，样本数量：49
下载总大小：17374，数据集总存储大小：12489.272727272728
- 配置名称：piqa_ar（物理交互问答（PIQA）阿拉伯语版）
特征字段：
- 字段名：查询（query），数据类型：字符串（string）
- 字段名：候选答案1（sol1），数据类型：字符串（string）
- 字段名：候选答案2（sol2），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：1367，样本数量：5
- 划分名称：测试集（test），字节数：71674.20130932897，样本数量：183
下载总大小：45522，数据集总存储大小：73041.20130932897
- 配置名称：race_ar（英语阅读理解考试（RACE）阿拉伯语版）
特征字段：
- 字段名：查询（query），数据类型：字符串（string）
- 字段名：候选答案1（sol1），数据类型：字符串（string）
- 字段名：候选答案2（sol2），数据类型：字符串（string）
- 字段名：候选答案3（sol3），数据类型：字符串（string）
- 字段名：候选答案4（sol4），数据类型：字符串（string）
- 字段名：标签（label），数据类型：64位整数（int64）
数据集划分：
- 划分名称：验证集（validation），字节数：13808，样本数量：5
- 划分名称：测试集（test），字节数：1347575.423006695，样本数量：492
下载总大小：735957，数据集总存储大小：1361383.423006695
- 配置名称：sciq_ar（科学问答（SciQ）阿拉伯语版）
特征字段：
- 字段名：问题（question），数据类型：字符串（string）
- 字段名：干扰项3（distractor3），数据类型：字符串（string）
- 字段名：干扰项1（distractor1），数据类型：字符串（string）
- 字段名：干扰项2（distractor2），数据类型：字符串（string）
- 字段名：正确答案（correct_answer），数据类型：字符串（string）
- 字段名：辅助文本（support），数据类型：字符串（string）
数据集划分：
- 划分名称：验证集（validation），字节数：4764，样本数量：5
- 划分名称：测试集（test），字节数：87654.50050251256，样本数量：99
下载总大小：64104，数据集总存储大小：92418.50050251256
- 配置名称：toxigen_ar（有毒生成语料库（ToxiGen）阿拉伯语版）
特征字段：
- 字段名：文本（text），数据类型：字符串（string）
- 字段名：目标群体（target_group），数据类型：字符串（string）
- 字段名：是否符合事实（factual?），数据类型：字符串（string）
- 字段名：群体内效应（ingroup_effect），数据类型：字符串（string）
- 字段名：低俗程度（lewd），数据类型：字符串（string）
- 字段名：框架表述（framing），数据类型：字符串（string）
- 字段名：预测目标群体（predicted_group），数据类型：字符串（string）
- 字段名：刻板印象程度（stereotyping），数据类型：字符串（string）
- 字段名：意图评分（intent），数据类型：64位浮点数（float64）
- 字段名：AI标注毒性评分（toxicity_ai），数据类型：64位浮点数（float64）
- 字段名：人工标注毒性评分（toxicity_human），数据类型：64位浮点数（float64）
- 字段名：预测发布者（predicted_author），数据类型：字符串（string）
- 字段名：实际生成方法（actual_method），数据类型：字符串（string）
数据集划分：
- 划分名称：验证集（validation），字节数：3029，样本数量：5
- 划分名称：测试集（test），字节数：53732.813903743314，样本数量：93
下载总大小：30768，数据集总存储大小：56761.813903743314
配置详情：
- 配置名称：arc_challenge_okapi_ar，数据文件路径：
- 划分：验证集（validation），文件路径：arc_challenge_okapi_ar/validation-*
- 划分：测试集（test），文件路径：arc_challenge_okapi_ar/test-*
- 配置名称：arc_easy_ar，数据文件路径：
- 划分：验证集（validation），文件路径：arc_easy_ar/validation-*
- 划分：测试集（test），文件路径：arc_easy_ar/test-*
- 配置名称：boolq_ar，数据文件路径：
- 划分：验证集（validation），文件路径：boolq_ar/validation-*
- 划分：测试集（test），文件路径：boolq_ar/test-*
- 配置名称：copa_ext_ar，数据文件路径：
- 划分：验证集（validation），文件路径：copa_ext_ar/validation-*
- 划分：测试集（test），文件路径：copa_ext_ar/test-*
- 配置名称：hellaswag_okapi_ar，数据文件路径：
- 划分：验证集（validation），文件路径：hellaswag_okapi_ar/validation-*
- 划分：测试集（test），文件路径：hellaswag_okapi_ar/test-*
- 配置名称：mmlu_okapi_ar，数据文件路径：
- 划分：验证集（validation），文件路径：mmlu_okapi_ar/validation-*
- 划分：测试集（test），文件路径：mmlu_okapi_ar/test-*
- 配置名称：openbook_qa_ext_ar，数据文件路径：
- 划分：验证集（validation），文件路径：openbook_qa_ext_ar/validation-*
- 划分：测试集（test），文件路径：openbook_qa_ext_ar/test-*
- 配置名称：piqa_ar，数据文件路径：
- 划分：验证集（validation），文件路径：piqa_ar/validation-*
- 划分：测试集（test），文件路径：piqa_ar/test-*
- 配置名称：race_ar，数据文件路径：
- 划分：验证集（validation），文件路径：race_ar/validation-*
- 划分：测试集（test），文件路径：race_ar/test-*
- 配置名称：sciq_ar，数据文件路径：
- 划分：验证集（validation），文件路径：sciq_ar/validation-*
- 划分：测试集（test），文件路径：sciq_ar/test-*
- 配置名称：toxigen_ar，数据文件路径：
- 划分：验证集（validation），文件路径：toxigen_ar/validation-*
- 划分：测试集（test），文件路径：toxigen_ar/test-*