qiaojin/PubMedQA
收藏Hugging Face2024-03-06 更新2024-04-19 收录
下载链接：
https://hf-mirror.com/datasets/qiaojin/PubMedQA
下载链接
链接失效反馈资源简介：
---
annotations_creators:
- expert-generated
- machine-generated
language_creators:
- expert-generated
language:
- en
license:
- mit
multilinguality:
- monolingual
size_categories:
- 100K<n<1M
- 10K<n<100K
- 1K<n<10K
source_datasets:
- original
task_categories:
- question-answering
task_ids:
- multiple-choice-qa
paperswithcode_id: pubmedqa
pretty_name: PubMedQA
config_names:
- pqa_artificial
- pqa_labeled
- pqa_unlabeled
dataset_info:
- config_name: pqa_artificial
features:
- name: pubid
dtype: int32
- name: question
dtype: string
- name: context
sequence:
- name: contexts
dtype: string
- name: labels
dtype: string
- name: meshes
dtype: string
- name: long_answer
dtype: string
- name: final_decision
dtype: string
splits:
- name: train
num_bytes: 443501057
num_examples: 211269
download_size: 233411194
dataset_size: 443501057
- config_name: pqa_labeled
features:
- name: pubid
dtype: int32
- name: question
dtype: string
- name: context
sequence:
- name: contexts
dtype: string
- name: labels
dtype: string
- name: meshes
dtype: string
- name: reasoning_required_pred
dtype: string
- name: reasoning_free_pred
dtype: string
- name: long_answer
dtype: string
- name: final_decision
dtype: string
splits:
- name: train
num_bytes: 2088898
num_examples: 1000
download_size: 1075513
dataset_size: 2088898
- config_name: pqa_unlabeled
features:
- name: pubid
dtype: int32
- name: question
dtype: string
- name: context
sequence:
- name: contexts
dtype: string
- name: labels
dtype: string
- name: meshes
dtype: string
- name: long_answer
dtype: string
splits:
- name: train
num_bytes: 125922964
num_examples: 61249
download_size: 66010017
dataset_size: 125922964
configs:
- config_name: pqa_artificial
data_files:
- split: train
path: pqa_artificial/train-*
- config_name: pqa_labeled
data_files:
- split: train
path: pqa_labeled/train-*
- config_name: pqa_unlabeled
data_files:
- split: train
path: pqa_unlabeled/train-*
---
# Dataset Card for [Dataset Name]
## Table of Contents
- [Dataset Description](#dataset-description)
- [Dataset Summary](#dataset-summary)
- [Supported Tasks and Leaderboards](#supported-tasks-and-leaderboards)
- [Languages](#languages)
- [Dataset Structure](#dataset-structure)
- [Data Instances](#data-instances)
- [Data Fields](#data-fields)
- [Data Splits](#data-splits)
- [Dataset Creation](#dataset-creation)
- [Curation Rationale](#curation-rationale)
- [Source Data](#source-data)
- [Annotations](#annotations)
- [Personal and Sensitive Information](#personal-and-sensitive-information)
- [Considerations for Using the Data](#considerations-for-using-the-data)
- [Social Impact of Dataset](#social-impact-of-dataset)
- [Discussion of Biases](#discussion-of-biases)
- [Other Known Limitations](#other-known-limitations)
- [Additional Information](#additional-information)
- [Dataset Curators](#dataset-curators)
- [Licensing Information](#licensing-information)
- [Citation Information](#citation-information)
- [Contributions](#contributions)
## Dataset Description
- **Homepage:** [PubMedQA homepage](https://pubmedqa.github.io/ )
- **Repository:** [PubMedQA repository](https://github.com/pubmedqa/pubmedqa)
- **Paper:** [PubMedQA: A Dataset for Biomedical Research Question Answering](https://arxiv.org/abs/1909.06146)
- **Leaderboard:** [PubMedQA: Leaderboard](https://pubmedqa.github.io/)
### Dataset Summary
The task of PubMedQA is to answer research questions with yes/no/maybe (e.g.: Do preoperative statins reduce atrial fibrillation after coronary artery bypass grafting?) using the corresponding abstracts.
### Supported Tasks and Leaderboards
The official leaderboard is available at: https://pubmedqa.github.io/.
500 questions in the `pqa_labeled` are used as the test set. They can be found at https://github.com/pubmedqa/pubmedqa.
### Languages
English
## Dataset Structure
### Data Instances
[More Information Needed]
### Data Fields
[More Information Needed]
### Data Splits
[More Information Needed]
## Dataset Creation
### Curation Rationale
[More Information Needed]
### Source Data
#### Initial Data Collection and Normalization
[More Information Needed]
#### Who are the source language producers?
[More Information Needed]
### Annotations
#### Annotation process
[More Information Needed]
#### Who are the annotators?
[More Information Needed]
### Personal and Sensitive Information
[More Information Needed]
## Considerations for Using the Data
### Social Impact of Dataset
[More Information Needed]
### Discussion of Biases
[More Information Needed]
### Other Known Limitations
[More Information Needed]
## Additional Information
### Dataset Curators
[More Information Needed]
### Licensing Information
[More Information Needed]
### Citation Information
[More Information Needed]
### Contributions
Thanks to [@tuner007](https://github.com/tuner007) for adding this dataset.
提供机构：
qiaojin
原始信息汇总
数据集概述
- 名称: PubMedQA
- 任务类别: 问答（Question-Answering）
- 任务ID: 多选题问答（Multiple-Choice QA）
- 语言: 英语（English）
- 许可证: MIT
- 多语言性: 单语（Monolingual）
- 数据集大小:
- 1K<n<10K
- 10K<n<100K
- 100K<n<1M
数据集结构
数据配置
- pqa_artificial
- 特征:
- pubid: int32
- question: string
- context:
- contexts: string
- labels: string
- meshes: string
- long_answer: string
- final_decision: string
- 数据分割:
- train:
- 字节数: 443501057
- 示例数: 211269
- 下载大小: 233411194
- 数据集大小: 443501057
- train:
- 特征:
- pqa_labeled
- 特征:
- pubid: int32
- question: string
- context:
- contexts: string
- labels: string
- meshes: string
- reasoning_required_pred: string
- reasoning_free_pred: string
- long_answer: string
- final_decision: string
- 数据分割:
- train:
- 字节数: 2088898
- 示例数: 1000
- 下载大小: 1075513
- 数据集大小: 2088898
- train:
- 特征:
- pqa_unlabeled
- 特征:
- pubid: int32
- question: string
- context:
- contexts: string
- labels: string
- meshes: string
- long_answer: string
- 数据分割:
- train:
- 字节数: 125922964
- 示例数: 61249
- 下载大小: 66010017
- 数据集大小: 125922964
- train:
- 特征:
数据集创建
- 注释创建者:
- 专家生成
- 机器生成
- 语言创建者: 专家生成
- 源数据集: 原始（Original）
搜集汇总
数据集介绍
构建方式
在生物医学信息学领域，PubMedQA数据集的构建体现了对研究问题回答任务的深度探索。该数据集通过从PubMed文献中提取研究问题及其对应摘要，构建了三个核心子集：人工标注的pqa_labeled包含1000个实例，由专家生成答案；pqa_artificial则利用自动化方法生成了超过21万个实例，模拟真实问答场景；pqa_unlabeled提供了6万余个未标注实例，为半监督学习提供资源。整个构建过程融合了专家知识与机器生成技术，确保了数据在规模与质量上的平衡。
使用方法
使用PubMedQA时，研究者可通过HuggingFace平台直接加载三个配置子集。对于监督学习任务，推荐使用pqa_labeled进行模型训练与验证，其中500个问题已预留为测试集。pqa_artificial适用于需要大量训练数据的场景，如预训练语言模型；而pqa_unlabeled则可用于自监督学习或数据增强。数据集支持问答任务的直接建模，用户可依据问题、上下文和最终决策字段构建分类模型，同时利用长答案字段进行可解释性分析。
背景与挑战
背景概述
PubMedQA数据集诞生于2019年，由生物医学信息学领域的研究团队精心构建，旨在应对医学文献中复杂问答任务的挑战。该数据集的核心研究问题聚焦于如何让机器理解并回答基于生物医学研究摘要的是非判断型问题，例如评估特定术前药物对术后并发症的影响。通过整合专家标注与机器生成的数据，PubMedQA不仅推动了生物医学自然语言处理技术的发展，也为临床决策支持系统提供了重要的数据基础，显著提升了自动化文献综述与证据提取的可行性。
当前挑战
PubMedQA数据集所针对的领域挑战在于生物医学问答任务的高复杂性，要求模型具备深度的领域知识推理能力，以准确解析专业术语与因果逻辑。在构建过程中，挑战主要体现在数据标注的严谨性上，需要医学专家对大量研究摘要进行精细的是非判断，确保答案的可靠性与一致性。此外，处理未标注数据时，如何有效利用这些信息增强模型泛化能力，同时避免引入噪声，构成了另一重技术难题。
常用场景
经典使用场景
在生物医学信息检索领域，PubMedQA数据集为研究者提供了一个基于PubMed摘要的问答基准。该数据集通过人工标注和机器生成相结合的方式，构建了包含问题、上下文和最终决策（是/否/可能）的结构化样本。其经典使用场景在于评估和训练模型在生物医学文献中的阅读理解能力，特别是针对需要推理的复杂研究问题，例如评估术前他汀类药物是否减少冠状动脉搭桥术后心房颤动的发生。这种设置模拟了真实科研环境中从海量文献中提取关键结论的过程，为自然语言处理技术在专业领域的应用奠定了实证基础。
解决学术问题
PubMedQA数据集主要解决了生物医学自然语言处理中的若干核心学术问题。它针对传统问答系统在专业领域泛化能力不足的局限，提供了大规模、高质量的标注数据，促进了模型对生物医学术语和复杂逻辑关系的理解。该数据集的意义在于填补了生物医学问答评估的空白，使得研究者能够量化模型在真实科研问题上的性能，推动了可解释人工智能在医疗文本分析中的发展。其影响延伸至跨学科研究，为临床决策支持系统的开发提供了关键的数据支撑和技术验证途径。
实际应用
在实际应用层面，PubMedQA数据集被广泛应用于医疗健康领域的智能系统开发。例如，在临床辅助决策工具中，模型可以利用该数据集学习从最新研究摘要中快速提取证据，帮助医生回答特定的治疗或诊断问题。制药公司的研发部门也可借助此类技术扫描文献，加速药物效果或副作用的评估。这些应用不仅提升了信息检索的效率，还通过提供基于实证的答案，增强了医疗决策的科学性和时效性，展现了人工智能在专业化服务中的实用价值。
数据集最近研究
最新研究方向
在生物医学信息抽取领域，PubMedQA数据集凭借其基于PubMed摘要构建的问答结构，已成为评估模型在专业医学推理能力上的重要基准。当前研究聚焦于结合大型语言模型与领域知识增强技术，探索如何利用该数据集的标注与未标注子集，提升模型对复杂医学问题的因果推断和证据整合能力。相关热点事件包括多模态医学问答系统的兴起，推动该数据集在临床决策支持中的应用拓展，其影响体现在促进可解释人工智能在医疗健康领域的发展，为自动化文献综述和精准医疗提供关键技术支持。
以上内容由遇见数据集搜集并总结生成
