five

hajhouj/med_qa|医学数据集|问答系统数据集

收藏
hugging_face2024-03-27 更新2024-06-11 收录
医学
问答系统
下载链接:
https://hf-mirror.com/datasets/hajhouj/med_qa
下载链接
链接失效反馈
资源简介:
在本研究中,我们提出了第一个用于解决医学问题的自由形式多项选择开放式问答数据集MedQA,该数据集收集自专业医学委员会考试。它涵盖三种语言:英语、简体中文和繁体中文,分别包含12,723、34,251和14,123个问题。除了问题数据外,我们还收集并发布了一个大规模的医学教科书语料库,阅读理解模型可以从中获取回答问题的必要知识。

在本研究中,我们提出了第一个用于解决医学问题的自由形式多项选择开放式问答数据集MedQA,该数据集收集自专业医学委员会考试。它涵盖三种语言:英语、简体中文和繁体中文,分别包含12,723、34,251和14,123个问题。除了问题数据外,我们还收集并发布了一个大规模的医学教科书语料库,阅读理解模型可以从中获取回答问题的必要知识。
提供机构:
hajhouj
原始信息汇总

MedQA数据集概述

基本信息

  • 名称: MedQA
  • 语言: 英语、简体中文、繁体中文(台湾)
  • 许可证: 未知
  • 多语言性: 多语言
  • 公共可用性:
  • 任务类型: 问答(QA)

数据集详情

  • 问题数量:
    • 英语: 12,723
    • 简体中文: 34,251
    • 繁体中文(台湾): 14,123
  • 来源: 专业医学考试
  • 附加资源: 包含从医学教科书中收集的大规模语料库,用于支持阅读理解模型回答问题。

主页

  • 链接: https://github.com/jind11/MedQA
AI搜集汇总
数据集介绍
main_image_url
构建方式
MedQA数据集的构建基于专业医疗执照考试,涵盖了英语、简体中文和繁体中文三种语言。该数据集精心收集了12,723个英语问题、34,251个简体中文问题和14,123个繁体中文问题,形成了一个庞大的多语言医疗问答库。此外,数据集还整合了来自医学教科书的大规模语料库,为阅读理解模型提供了必要的知识背景,以支持其回答相关问题。
特点
MedQA数据集的显著特点在于其多语言覆盖和专业性。首先,它支持英语、简体中文和繁体中文三种语言,为跨语言医疗问答研究提供了丰富的资源。其次,数据集的内容源自专业医疗执照考试,确保了问题的高质量和专业性。此外,数据集还附带了一个大规模的医学教科书语料库,增强了模型的知识获取能力。
使用方法
MedQA数据集适用于医疗领域的问答系统开发和研究。研究者可以利用该数据集训练和评估多语言医疗问答模型,提升模型在处理专业医疗问题上的表现。此外,数据集中的医学教科书语料库也可用于增强模型的知识背景,提高其回答复杂医疗问题的能力。通过结合多语言和专业知识,MedQA为医疗问答系统的创新和优化提供了坚实的基础。
背景与挑战
背景概述
在医学领域,准确诊断和治疗依赖于对复杂医学知识的深入理解和应用。MedQA数据集由Jin等人于2021年创建,旨在通过提供一个多语言、多选择的开放域问答数据集,来解决医学考试中的问题。该数据集涵盖了英语、简体中文和繁体中文三种语言,分别包含12,723、34,251和14,123个问题,这些问题均来源于专业医学考试。此外,数据集还附带了一个大规模的医学教科书语料库,以支持阅读理解模型获取必要的知识来回答问题。MedQA的发布不仅推动了医学问答系统的发展,也为跨语言医学知识的处理提供了宝贵的资源。
当前挑战
MedQA数据集在构建过程中面临多项挑战。首先,多语言数据的收集和处理需要克服语言间的差异和文化背景的差异,确保数据的质量和一致性。其次,医学领域的专业性和复杂性要求数据集中的问题具有高度的专业性和准确性,这对数据标注和验证提出了严格的要求。此外,如何有效地利用附带的医学教科书语料库,以提升问答模型的性能,也是一个重要的研究课题。这些挑战不仅涉及技术层面的难题,还包括对医学知识的深入理解和应用。
常用场景
经典使用场景
在医学领域,MedQA数据集被广泛用于开发和评估自由形式的多项选择开放域问答系统。该数据集通过模拟专业医疗执照考试中的问题,为研究人员提供了一个标准化的测试平台,以验证其模型在实际医疗场景中的应用能力。通过处理这些复杂且多样的医学问题,研究人员能够推动自然语言处理技术在医疗诊断和教育中的应用。
衍生相关工作
基于MedQA数据集,研究者们开发了多种多样的医学问答模型和系统,推动了医学自然语言处理领域的进步。例如,一些研究工作利用该数据集训练深度学习模型,以提高医学文本的理解和推理能力。此外,还有研究探索了如何将MedQA数据集与其他医学知识库结合,以构建更加全面和准确的医学问答系统。这些衍生工作不仅丰富了医学问答的研究内容,也为实际应用提供了技术支持。
数据集最近研究
最新研究方向
在医学领域,MedQA数据集的最新研究方向主要集中在多语言医学问答系统的开发与优化。该数据集涵盖了英语、简体中文和繁体中文三种语言,为跨语言医学知识的传递和应用提供了丰富的资源。研究者们致力于通过深度学习技术,提升模型在不同语言环境下的问答准确性和效率,以应对全球范围内医疗资源分布不均的问题。此外,MedQA数据集的开放性也为医学教育、临床决策支持系统的发展提供了新的契机,推动了医学人工智能领域的创新与进步。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

中国区域地面气象要素驱动数据集 v2.0(1951-2024)

中国区域地面气象要素驱动数据集(China Meteorological Forcing Data,以下简称 CMFD)是为支撑中国区域陆面、水文、生态等领域研究而研发的一套高精度、高分辨率、长时间序列数据产品。本页面发布的 CMFD 2.0 包含了近地面气温、气压、比湿、全风速、向下短波辐射通量、向下长波辐射通量、降水率等气象要素,时间分辨率为 3 小时,水平空间分辨率为 0.1°,时间长度为 74 年(1951~2024 年),覆盖了 70°E~140°E,15°N~55°N 空间范围内的陆地区域。CMFD 2.0 融合了欧洲中期天气预报中心 ERA5 再分析数据与气象台站观测数据,并在辐射、降水数据产品中集成了采用人工智能技术制作的 ISCCP-ITP-CNN 和 TPHiPr 数据产品,其数据精度较 CMFD 的上一代产品有显著提升。 CMFD 历经十余年的发展,其间发布了多个重要版本。2019 年发布的 CMFD 1.6 是完全采用传统数据融合技术制作的最后一个 CMFD 版本,而本次发布的 CMFD 2.0 则是 CMFD 转向人工智能技术制作的首个版本。此版本与 1.6 版具有相同的时空分辨率和基础变量集,但在其它诸多方面存在大幅改进。除集成了采用人工智能技术制作的辐射和降水数据外,在制作 CMFD 2.0 的过程中,研发团队尽可能采用单一来源的再分析数据作为输入并引入气象台站迁址信息,显著缓解了 CMFD 1.6 中因多源数据拼接和气象台站迁址而产生的虚假气候突变。同时,CMFD 2.0 数据的时间长度从 CMFD 1.6 的 40 年大幅扩展到了 74 年,并将继续向后延伸。CMFD 2.0 的网格空间范围虽然与 CMFD 1.6 相同,但其有效数据扩展到了中国之外,能够更好地支持跨境区域研究。为方便用户使用,CMFD 2.0 还在基础变量集之外提供了若干衍生变量,包括近地面相对湿度、雨雪分离降水产品等。此外,CMFD 2.0 摒弃了 CMFD 1.6 中通过 scale_factor 和 add_offset 参数将实型数据化为整型数据的压缩技术,转而直接将实型数据压缩存储于 NetCDF4 格式文件中,从而消除了用户使用数据时进行解压换算的困扰。 本数据集原定版本号为 1.7,但鉴于本数据集从输入数据到研制技术都较上一代数据产品有了大幅的改变,故将其版本号重新定义为 2.0。CMFD 2.0 的数据内容与此前宣传的 CMFD 1.7 基本一致,仅对 1983 年 7 月以后的向下短/长波辐射通量数据进行了更新,以修正其长期趋势存在的问题。

国家青藏高原科学数据中心 收录

Nexdata/chinese_dialect

该数据集包含25,000小时的中文方言语音数据,收集自多个方言区域的本地方言使用者,涵盖闽南语、粤语、四川话、河南话、东北话、上海话、维吾尔语和藏语等。数据格式为16kHz、16bit、未压缩的wav文件,单声道。句子准确率超过95%。数据集支持的任务包括自动语音识别(ASR)和音频说话人识别。

hugging_face 收录

中国行政区划数据

本项目为中国行政区划数据,包括省级、地级、县级、乡级和村级五级行政区划数据。数据来源于国家统计局,存储格式为sqlite3 db文件,支持直接使用数据库连接工具打开。

github 收录

中铁十四局大盾构掘进施工大数据

我公司将盾构机掘进施工产生的基础数据开发成中铁十四局大盾构掘进施工大数据。该数据资源集包括:施工进度报表、日报、项目地层信息表、项目地层基本信息表、数字盾构-盾构预警信息、壳智汇-传感器数据、项目坐标、报表-掘进记录、报表统计(全状态下所有数据)、报表统计(全状态下所有数据)、报表统计(掘进状态下所有数据)、项目环报、管片上浮、气泡仓压力表、大直径盾构项目统计、盾构施工历史数据-传感器表、盾构施工历史数据-实时数据、盾构施工历史数据-单环分析结果、结泥饼预警计算存储、临时点位表、点位信息配置表、点位历史数据、环号所在表信息、掘进状态记录表、环数据临时表。

山东数据资产登记平台 收录

MeSH

MeSH(医学主题词表)是一个用于索引和检索生物医学文献的标准化词汇表。它包含了大量的医学术语和概念,用于描述医学文献中的主题和内容。MeSH数据集包括主题词、副主题词、树状结构、历史记录等信息,广泛应用于医学文献的分类和检索。

www.nlm.nih.gov 收录