openlifescienceai/mmlu_college_biology

---
dataset_info:
features:
- name: subject_name
dtype: string
- name: data
struct:
- name: Correct Answer
dtype: string
- name: Correct Option
dtype: string
- name: Options
struct:
- name: A
dtype: string
- name: B
dtype: string
- name: C
dtype: string
- name: D
dtype: string
- name: Question
dtype: string
- name: id
dtype: string
splits:
- name: test
num_bytes: 62958
num_examples: 144
- name: validation
num_bytes: 6295
num_examples: 16
- name: dev
num_bytes: 1948
num_examples: 5
download_size: 68830
dataset_size: 71201
configs:
- config_name: default
data_files:
- split: test
path: data/test-*
- split: validation
path: data/validation-*
- split: dev
path: data/dev-*
---

原始信息汇总

数据集概述

数据集特征

• subject_name: 数据类型为字符串。
• id: 数据类型为字符串。
• data: 结构化数据，包含以下子特征：
  • Correct Answer: 数据类型为字符串。
  • Correct Option: 数据类型为字符串。
  • Options: 结构化数据，包含以下子特征：
    • A: 数据类型为字符串。
    • B: 数据类型为字符串。
    • C: 数据类型为字符串。
    • D: 数据类型为字符串。
  • Question: 数据类型为字符串。

数据集分割

• test: 包含144个样本，占用62958字节。
• validation: 包含16个样本，占用6295字节。
• dev: 包含5个样本，占用1948字节。

数据集大小

• 下载大小: 68830字节。
• 数据集总大小: 71201字节。

配置文件

• config_name: default
• data_files:
  • test: 路径为data/test-*。
  • validation: 路径为data/validation-*。
  • dev: 路径为data/dev-*。

搜集汇总

背景与挑战

背景概述

这是一个 MMLU 基准测试中的大学水平生物学多项选择题数据集，包含 165 个条目，涵盖遗传学、生态学、细胞生物学等主题，每个条目提供了问题、选项和正确答案，适用于语言模型评估或训练。数据集格式为 Parquet，分为测试、验证和开发子集。