five

ChuGyouk/Ko-MTS-Dialog

收藏
Hugging Face2024-03-30 更新2024-06-11 收录
下载链接:
https://hf-mirror.com/datasets/ChuGyouk/Ko-MTS-Dialog
下载链接
链接失效反馈
官方服务:
资源简介:
MTS-Dialog数据集是一个包含1.7k条简短医患对话及其摘要的韩语翻译版本。该数据集通过DeepL进行自动翻译,并经过人工审查。然而,由于翻译不准确、文化差异和医学术语翻译问题,建议不要将该数据集用于韩语医疗对话摘要任务,而是仅使用对话部分来训练类似聊天机器人的模型。

MTS-Dialog数据集是一个包含1.7k条简短医患对话及其摘要的韩语翻译版本。该数据集通过DeepL进行自动翻译,并经过人工审查。然而,由于翻译不准确、文化差异和医学术语翻译问题,建议不要将该数据集用于韩语医疗对话摘要任务,而是仅使用对话部分来训练类似聊天机器人的模型。
提供机构:
ChuGyouk
原始信息汇总

数据集概述

数据集名称

  • MTS-Dialog

数据集描述

  • Ko-MTS-Dialog 是 MTS-Dialog 数据集的韩语翻译版本,包含1.7k条简短的医患对话及其对应摘要。

语言

  • 韩语(ko)

任务类别

  • 文本生成(text-generation)

许可证

  • CC-BY-4.0

标签

  • 医疗(medical)

数据翻译过程

  • 使用 DeepL 进行自动翻译,并对结果进行人工审核。

警告与注意事项

  1. 建议不要将此数据集用于韩语医疗对话摘要任务,仅用于训练类似聊天机器人的模型。
  2. 由于英韩语言的根本差异,部分翻译可能显得奇怪,这些未在审核中直接修改以保持一致性。
  3. 由于美韩文化差异,数据内容可能不适用,例如度量单位(温度、重量)和法律差异(如大麻/大麻的合法性)。
  4. 部分医疗缩写翻译不佳,有些已正确翻译,有些则翻译错误或未翻译。

示例数据结构

  • ID: 数据标识符
  • section_text: 英文对话文本
  • 섹션_텍스트: 韩文对话文本
  • 대화: 韩文对话记录
  • dialogue: 英文对话记录
搜集汇总
数据集介绍
main_image_url
构建方式
Ko-MTS-Dialog数据集是基于英文MTS-Dialog语料库的韩文翻译版本,原始数据集收录了约1,700条简短的医患对话及其对应的摘要。构建过程中,采用了DeepL自动翻译引擎进行初步的韩文转换,随后通过人工审查对翻译结果进行校验与修正。该数据集保留了原始对话的医患交互结构,包含对话文本、摘要文本以及结构化段落信息,旨在为韩语医疗领域的自然语言处理研究提供基础资源。
特点
该数据集的核心特点在于其双语医患对话的平行结构,每条样本同时包含韩文和英文的对话记录及摘要,便于跨语言研究。然而,由于自动翻译的局限,数据中存在若干值得注意的问题,包括医学术语翻译不准确(如“非贡献性”被译为“비기여”)、韩英语言习惯差异导致的表达生硬(如否定回答的语用转换),以及美韩文化差异带来的度量单位不一致(如华氏度与摄氏度)。此外,部分医疗缩略词(如CVA)被错误翻译或未翻译,这些特点使得数据集更适合用于对话生成而非摘要任务。
使用方法
该数据集主要适用于韩语医疗对话系统的训练,尤其推荐用于构建聊天机器人等对话生成模型。使用时,可直接加载Hugging Face上的数据集仓库,通过标准的数据加载接口获取对话字段('대화'或'dialogue')进行模型输入。鉴于翻译质量限制,建议在训练前对医学术语进行额外清洗或领域适配,并注意处理文化差异带来的数据偏差。验证集和测试集将后续更新,当前版本仅提供训练数据,适用于基于文本生成任务的多语言研究场景。
背景与挑战
背景概述
Ko-MTS-Dialog数据集是MTS-Dialog的韩语翻译版本,由研究者ChuGyouk于2023年基于Abacha等人创建的原始英文医疗对话数据集构建而成。该数据集包含约1700条简短的医患对话及对应的摘要,旨在为医疗领域的自然语言处理研究提供资源。其核心研究问题聚焦于如何利用对话数据生成临床笔记,从而提升医疗文档自动化的效率与准确性。在相关领域,这类数据集对于推动医疗对话摘要、临床决策支持系统以及智能问诊助手的发展具有重要影响力,尤其在非英语语言环境中填补了医疗对话数据的空白。
当前挑战
该数据集面临多重挑战。首先,在领域问题层面,医患对话摘要任务需应对语言歧义性和文化差异带来的复杂性,例如韩语中“네”在肯定疑问句中的特殊用法可能导致翻译错误。其次,构建过程中遭遇显著困难:自动翻译(如DeepL)在医学专业术语上表现不佳,如将“CVA”误译为“심근경색”(心肌梗死)而非“뇌졸중”(中风);单位制差异(如华氏度与摄氏度、磅与千克)未作本地化调整;部分医学缩写(如MCV)保留英文未译,影响数据可用性。此外,原数据集基于美国医疗背景,涉及大麻合法性等文化敏感内容,直接迁移至韩国可能引发伦理与实用性问题。
常用场景
经典使用场景
Ko-MTS-Dialog 数据集的核心应用场景聚焦于医患对话的语义理解与自动摘要生成,特别是在韩语医疗语境下。该数据集包含约1700对简短的医患对话及其对应的摘要,为构建能够从自然医患交流中提取关键临床信息的模型提供了基础。研究者通常利用其对话部分训练对话式AI,如医疗聊天机器人,以模拟医生与患者之间的信息交互,从而提升模型在真实临床环境中对症状描述、病史询问等环节的响应能力。
实际应用
在实际应用中,Ko-MTS-Dialog 可被用于开发面向韩语患者的智能问诊系统,辅助医生进行初步病史采集和症状分类。其对话数据能够训练模型理解患者对病情的非结构化表述,并生成结构化的病历摘要。此外,该数据集还支持构建医疗教育工具,例如模拟标准化病人对话,用于医学生的临床沟通培训,从而在降低人力成本的同时提升医疗服务的可及性与效率。
衍生相关工作
该数据集衍生了多项经典工作,包括对医患对话摘要任务中跨语言性能的基准测试,以及基于提示学习的对话理解研究。其原始英文版本 MTS-Dialog 启发了诸如临床笔记自动生成等方向,而韩语版本则进一步催生了针对韩语医疗术语的词汇增强方法和对文化敏感性的对话适配技术。此外,该数据集也被用于评估大型语言模型在医疗对话领域的零样本与少样本学习能力,成为多语言医疗自然语言处理研究中的重要参考基准。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务