five

DeepPavlov/clinc150_es

收藏
Hugging Face2026-06-17 更新2026-06-21 收录
下载链接:
https://hf-mirror.com/datasets/DeepPavlov/clinc150_es
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集是一个多语言文本数据集,包含英语和西班牙语的utterance(话语)文本,每个样本对应一个浮点型label(标签),可能用于分类或回归任务。数据集分为训练集(15,200个样本)、测试集(5,500个样本)和验证集(3,100个样本),总大小约2.57 MB。特征包括utterance(原始话语)、label(目标值)和utterance_es(西班牙语翻译或对应话语),适用于自然语言处理任务,如情感分析、文本分类或多语言模型训练。

This dataset is a multilingual text dataset containing utterances in English and Spanish, with each sample associated with a float-type label, likely for classification or regression tasks. It is divided into train (15,200 examples), test (5,500 examples), and validation (3,100 examples) splits, with a total size of approximately 2.57 MB. Features include utterance (original text), label (target value), and utterance_es (Spanish translation or corresponding utterance), making it suitable for natural language processing tasks such as sentiment analysis, text classification, or multilingual model training.
提供机构:
DeepPavlov
搜集汇总
数据集介绍
main_image_url
构建方式
clinc150_es数据集是基于英文CLINC150数据集通过人工翻译构建而成的多语种意图识别资源,涵盖金融、旅游、天气等150个意图类别。原始数据经过母语译者精准转译为西班牙语,确保语义等价性与语言自然度。数据集划分为训练集(15200条)、测试集(5500条)与验证集(3100条),每条样本包含原始英文表述、对应西班牙语表述及意图标签,支持多语言自然语言理解任务的迁移学习研究。
特点
该数据集的核心特色在于双语对齐的结构设计,每条样本保留中英文对照形式,便于研究者探索跨语言意图识别的特征映射关系。其意图覆盖范围广泛且类别均衡,150个细粒度类别覆盖日常交互常见场景。标签采用浮点型数值编码,兼容标准分类模型的数值输入要求。验证集与测试集规模合理,为模型泛化能力评估提供可靠基准。
使用方法
研究者可直接通过HuggingFace Datasets库加载数据集,使用load_dataset('clinc150_es')指令获取预设的三分片数据。建模时,可将西班牙语文本作为输入特征、数值型标签作为监督目标,应用Transformer架构进行意图分类微调。双语对照特性支持对照实验设计,例如对比单语模型与跨语言模型的表现差异。建议配合CLINC150英文原版数据,构建零样本跨语言迁移学习评估框架。
背景与挑战
背景概述
Clinc150_es 数据集是面向西班牙语口语意图识别任务的高质量基准资源,由美国 Clinc 研究团队于2019年创建。该数据集聚焦于用户在与智能对话系统交互时可能表达的150种意图分类问题,涵盖了银行、旅游、天气、交通等多元主题。其核心研究问题在于为自然语言理解(NLU)系统在不同语言场景下提供精准的意图识别能力,从而助力多语言对话式AI的发展。该数据集在学术界和工业界被广泛采用,成为评估语义理解模型泛化性能的重要标杆,对推动跨语言意图识别研究产生了深远影响。
当前挑战
Clinc150_es 数据集面临的主要挑战包括:领域问题层面,西班牙语口语意图识别需处理用户表述的高度歧义性,例如同一意图可能以多种不同句法结构和词汇形式呈现,这对模型捕捉语义本质的能力构成严峻考验;构建过程中,将原始英语 Clinc150 精准迁移至西班牙语涉及专业语言学家的人工翻译与审核,以确保文化适配性和术语准确性,这一过程耗时且需避免翻译偏差。此外,数据中长尾意图类别的样本不均衡进一步增加了模型鲁棒性提升的难度。
常用场景
经典使用场景
CLINC150_ES 数据集是面向西班牙语自然语言理解领域的重要资源,专注于意图识别与槽位填充任务。该数据集包含了15,200条训练样本、3,100条验证样本及5,500条测试样本,覆盖150个细粒度意图类别,涵盖银行、旅行、天气、通讯等多样化场景。其经典用法是在跨语言迁移学习范式中,作为西班牙语意图分类和语义解析的基准测试平台,研究人员常用该数据集评估多语言预训练模型在低资源语言上的泛化能力,以及探索基于翻译或零样本学习的意图识别方法。
解决学术问题
该数据集有效解决了西班牙语对话系统中意图分类数据稀缺的核心问题,为学术研究提供了标准化的评估基准。它推动了跨语言意图识别技术的研究进展,使学者能够深入分析语言特异性表达对分类器性能的影响。同时,CLINC150_ES 为多语言语义理解领域提供了重要的数据支撑,有助于揭示不同语言间意图表示的结构差异,进而推动通用对话理解框架的构建。
衍生相关工作
围绕 CLINC150_ES 数据集,学术界衍生了一系列重要研究工作,包括多语言意图识别中的对抗训练策略、基于知识蒸馏的轻量化模型设计、以及跨语言注意力机制优化。此外,该数据集还被用于验证机器翻译增强的零样本意图分类方法,以及探索提示学习在低资源场景下的适用性。这些工作共同推动了西班牙语自然语言理解技术的整体发展。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务