mushinbush/MMLU-Pro-but-old

该数据集是MMLU-Pro的变体，但采用了MMLU的结构，包含多个学科（如生物学、商业、化学等）的配置，每个配置包含问题、主题、选项和答案等特征。

原始信息汇总

数据集概述

语言和许可证

• 语言：英语
• 许可证：MIT

数据集配置

数据集包含多个配置，每个配置对应一个特定的学科领域。每个配置包含以下特征：

• question：问题，数据类型为字符串。
• subject：学科，数据类型为字符串。
• choices：选项，数据类型为字符串序列。
• answer：答案，数据类型为类别标签，包含以下选项：
  • 0: A
  • 1: B
  • 2: C
  • 3: D
  • 4: E
  • 5: F
  • 6: G
  • 7: H
  • 8: I
  • 9: J

配置列表

• biology
• buisness
• chemistry
• computer_science
• economics
• engineering
• health
• history
• law
• math
• other
• philosophy
• physics
• psychology

数据文件

每个配置包含一个测试数据文件，路径格式为<学科>/test-*。