five

ParlAI/blended_skill_talk

收藏
Hugging Face2024-01-10 更新2024-06-15 收录
下载链接:
https://hf-mirror.com/datasets/ParlAI/blended_skill_talk
下载链接
链接失效反馈
官方服务:
资源简介:
BlendedSkillTalk数据集包含7k个对话,旨在展示多种对话模式,如展示个性、表达同理心和展示知识。数据集的语言为英语,数据来源于原始数据,标注由众包完成。数据集的结构包括训练集、验证集和测试集,分别包含4819、1009和980个样本。数据集的字段包括personas、additional_context、previous_utterance、context、free_messages、guided_messages、suggestions、guided_chosen_suggestions和label_candidates。

The BlendedSkillTalk dataset comprises 7,000 dialogues, designed to showcase a variety of dialogue patterns including expressing personality, conveying empathy, and demonstrating knowledge. The dataset is in English, with data sourced from original materials and annotations completed via crowdsourcing. Its structure includes training, validation, and test sets, which contain 4,819, 1,009, and 980 samples respectively. The fields of the dataset are personas, additional_context, previous_utterance, context, free_messages, guided_messages, suggestions, guided_chosen_suggestions, and label_candidates.
提供机构:
ParlAI
原始信息汇总

数据集概述

基本信息

  • 数据集名称: BlendedSkillTalk
  • 语言: 英语
  • 许可: 未知
  • 多语言性: 单语种
  • 数据集大小: 1K<n<10K
  • 源数据: 原始数据
  • 任务类别: 对话生成
  • 任务ID: dialogue-generation
  • 论文ID: blended-skill-talk

数据集结构

特征

  • personas: 字符串序列
  • additional_context: 字符串
  • previous_utterance: 字符串序列
  • context: 字符串
  • free_messages: 字符串序列
  • guided_messages: 字符串序列
  • suggestions: 包含以下字段的字典:
    • convai2: 字符串
    • empathetic_dialogues: 字符串
    • wizard_of_wikipedia: 字符串
  • guided_chosen_suggestions: 字符串序列
  • label_candidates: 字符串序列的序列

数据分割

  • 训练集: 4819个样本, 10830670字节
  • 验证集: 1009个样本, 43961447字节
  • 测试集: 980个样本, 44449895字节

下载和数据集大小

  • 下载大小: 10897644字节
  • 数据集大小: 99242012字节

配置

  • 配置名称: default
  • 数据文件:
    • 训练集: data/train-*
    • 验证集: data/validation-*
    • 测试集: data/test-*
搜集汇总
数据集介绍
main_image_url
构建方式
在对话系统研究领域,单一技能模型已难以满足复杂交互需求。BlendedSkillTalk数据集由ParlAI团队构建,旨在融合个性表达、共情能力和知识展示三种核心对话技能。其构建过程依托众包平台,招募标注员基于给定人物角色(personas)、额外上下文(additional_context)和前置对话(previous_utterance)进行多轮交互。标注员首先进行自由对话(free_messages),随后在系统提供的来自ConvAI2、EmpatheticDialogues和Wizard of Wikipedia三个数据集的建议回复(suggestions)引导下,生成引导式消息(guided_messages),最终形成约7000场融合多种技能的对话实例。
使用方法
研究者可通过HuggingFace Datasets库便捷加载该数据集,支持直接访问train、validation和test三个标准划分。使用时应重点关注personas、previous_utterance和context字段作为输入,以free_messages和guided_messages作为监督信号。对于技能融合分析,可利用suggestions和guided_chosen_suggestions字段量化模型对不同对话技能的依赖程度。建议在训练前对label_candidates字段进行预处理以适配生成式或检索式对话框架,同时利用additional_context字段作为知识增强的触发条件,从而充分挖掘该数据集在评估对话系统多技能协同能力方面的潜力。
背景与挑战
背景概述
在开放域对话系统的研究进程中,如何使对话代理同时具备个性化表达、情感共鸣与知识驱动等多种交互能力,始终是一项核心挑战。2020年,由Facebook AI Research团队Eric Michael Smith等人提出的BlendedSkillTalk数据集,正是针对这一难题而构建。该数据集包含约7000轮精心设计的人机对话,通过融合ConvAI2、EmpatheticDialogues与Wizard of Wikipedia三个经典语料库的对话模式,旨在评估对话代理在单一交互中综合运用个性、共情与知识的能力。其研究问题直指当前对话系统的碎片化困境,为构建更自然、更连贯的多技能融合对话模型提供了基准测试平台,对后续多轮对话研究产生了深远影响。
当前挑战
BlendedSkillTalk数据集所解决的领域挑战在于,现有对话系统往往仅擅长单一技能(如仅能展现个性或仅能提供知识),缺乏在真实复杂交互中灵活切换与融合多种对话模式的能力。构建过程中,主要挑战包括:1) 如何从三个异构源数据中提取并设计出能自然体现个性、共情与知识的对话片段,确保混合后的对话流不显生硬;2) 如何在众包标注环节中,引导标注员在自由对话与受指导对话之间保持平衡,避免因过度依赖模板建议而丧失交互的真实性;3) 如何设计有效的评估指标,以衡量模型在融合多种技能时的连贯性与用户满意度,而非仅关注单一维度的表现。
常用场景
经典使用场景
在开放域对话系统的研究中,BlendedSkillTalk数据集以其独特的混合技能对话设计而著称。该数据集由近7000条对话构成,每条对话均融合了人格化表达、共情回应和知识展示三种核心对话模式。研究者常将其作为训练和评估对话智能体综合能力的基准,要求模型在同一轮交互中无缝切换不同技能——例如在展现个性(ConvAI2风格)的同时注入共情(Empathetic Dialogues风格)和知识引用(Wizard of Wikipedia风格)。这种多技能融合的场景模拟了人类日常交流的复杂性,使得BlendedSkillTalk成为检验对话系统能否摆脱单一任务局限、迈向通用对话智能的关键测试平台。
解决学术问题
该数据集直面对话生成领域长期存在的碎片化困境:传统研究将人格化、共情和知识对话视为独立任务,导致模型难以在真实交互中灵活整合多种能力。BlendedSkillTalk通过精心设计的三阶段标注流程(自由对话→引导对话→技能建议选择),首次系统性地构建了多技能交织的对话样本。它解决了如何量化评估模型在动态语境中平衡个性化表达、情感理解和事实知识引用的学术难题,推动了对齐人类对话复杂性的评估范式革新。该数据集的出现,促使研究者从关注单一技能指标转向考察对话系统的整体连贯性、情感适切性和知识准确性。
实际应用
在智能客服、社交机器人和虚拟伴侣等实际场景中,BlendedSkillTalk的训练数据可直接用于提升对话系统的交互自然度。例如,基于该数据集训练的模型能够根据用户情绪状态自动切换回应策略:面对悲伤用户时优先展现共情,而在知识性问题中则调用事实信息。在游戏NPC对话生成领域,该数据集帮助角色在保持性格设定的同时,对玩家情感变化做出合理反应。此外,教育辅导系统可利用其多技能融合特性,在解答学术问题时穿插鼓励性语言,实现知识传递与情感支持的协同。
数据集最近研究
最新研究方向
当前,随着对话系统从单一任务向多技能融合的演进,如何让机器在自然交互中同时展现个性、共情与知识成为关键挑战。BlendedSkillTalk数据集作为首个系统性地融合ConvAI2人格化对话、EmpatheticDialogues共情回应与Wizard of Wikipedia知识驱动三种核心技能的人工标注语料库,为构建全能型对话代理提供了标准化评估基准。前沿研究聚焦于利用该数据集训练端到端模型,使其在开放域对话中动态切换人格化表达、情感支持与事实引用,同时规避不同技能间的冲突。相关热点包括基于提示学习的多任务联合训练、对比学习增强技能一致性,以及引入外部知识图谱提升事实准确性。该数据集的发布不仅推动了对话系统从技能分立走向融合统一的范式转变,更深刻影响了人机交互中信任感与自然度的提升,为未来具备综合社交智能的虚拟助手奠定了数据与评估基础。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务