anand-s/m_qalm

M-QALM基准测试利用了多个数据集，包括MEDQA（USMLE数据集）、MEDMCQA、BioASQ（2022）、HEADQA、ProcessBank、PubmedQA、MMLU（专注于临床和医学知识的子集）、BioMRC（Tiny A和B）、FRCOphth考试、QA4MRE（阿尔茨海默病问题）、MedicationInfo、MedQuad、LiveQA数据集（用于评估MedQuad的答案排名版本）、MashQA和MEDIQA-ANS。这些数据集涵盖了生物医学、临床和医学领域的问答和多选题任务。HEADQA数据集最近一次修改是在2023年9月27日。

The M-QALM Benchmark utilizes multiple datasets including MEDQA (USMLE dataset), MEDMCQA, BioASQ (2022), HEADQA, ProcessBank, PubmedQA, MMLU (subset focusing on clinical and medical knowledge), BioMRC (Tiny A and B), FRCOphth Exams, QA4MRE (Alzheimers Questions), MedicationInfo, MedQuad, LiveQA dataset (ranked version of answers used to evaluate MedQuad), MashQA, and MEDIQA-ANS. These datasets cover question-answering and multiple-choice tasks in the biomedical, clinical, and medical domains. The HEADQA dataset was last modified on September 27th, 2023.

原始信息汇总

M-QALM 数据集概述

基本信息

• 数据集名称: M-QALM
• 许可证: Apache 2.0
• 任务类别:
  • 问答
  • 多选题
• 语言: 英语
• 标签:
  • 生物医学
  • 临床
  • 医学

数据文件

• 配置名称: default
• 数据文件:
  • 分割: train_mcq
  • 路径: train_mcq/*.jsonl

包含的数据集

1. MEDQA (USMLE dataset)
2. MEDMCQA
3. BioASQ (2022)
4. HEADQA
5. ProcessBank
6. PubmedQA
7. MMLU (临床和医学知识子集)
8. BioMRC (Tiny A 和 B)
9. Fellowship of the Royal College of Ophthalmologists (FRCOphth) Exams
10. QA4MRE (阿尔茨海默病问题)
11. MedicationInfo
12. MedQuad
13. LiveQA dataset (MedQuad 评估使用的答案排名版本)
14. MashQA
15. MEDIQA-ANS

数据集更新

• HEADQA 数据集最后修改日期: 2023年9月27日