Mozilla/query-intent-detection-dataset-french
收藏Hugging Face2026-06-03 更新2026-06-14 收录
下载链接:
https://hf-mirror.com/datasets/Mozilla/query-intent-detection-dataset-french
下载链接
链接失效反馈官方服务:
资源简介:
---
dataset_info:
features:
- name: Query
dtype: string
- name: Label
dtype: string
- name: source
dtype: string
splits:
- name: train
num_bytes: 2061785
num_examples: 24001
- name: validation
num_bytes: 433557
num_examples: 5081
- name: test
num_bytes: 4742
num_examples: 89
download_size: 1164396
dataset_size: 2500084
configs:
- config_name: default
data_files:
- split: train
path: data/train-*
- split: validation
path: data/validation-*
- split: test
path: data/test-*
---
提供机构:
Mozilla搜集汇总
数据集介绍

构建方式
该数据集专为法语查询意图检测任务而构建,其数据来源涵盖多种真实场景下的用户查询语句。数据集包含三个字段:Query(查询文本)、Label(意图标签)和source(数据来源)。通过从不同渠道收集并人工标注的方式,确保了标签的准确性与多样性。数据被划分为训练集(24,001条)、验证集(5,081条)和测试集(89条),其中训练集与验证集规模较大,便于模型充分学习,而测试集则用于最终性能评估。整体数据集大小约为2.5 MB,下载压缩后约为1.16 MB,存储结构清晰,便于加载与处理。
特点
该数据集的核心特点在于其专注于法语语境的查询意图检测,填补了非英语语言意图识别资源的空白。每条数据均保留了原始查询文本与对应的意图标签,同时记录了数据来源,为多源数据融合与分析提供了可能。数据集按标准比例划分为训练、验证和测试三部分,其中测试集规模较小,适合作为快速验证基准。法语查询覆盖了日常交流与专业领域,意图标签体系设计合理,能够支持从简单到复杂的多类别意图分类任务,有利于提升模型在多语言场景下的泛化能力。
使用方法
使用该数据集时,可通过Hugging Face Datasets库直接加载,指定配置名'default'即可获取所有分片数据。加载后的数据以字典形式返回,包含'Query'、'Label'和'source'三个字段。研究者可基于训练集进行模型微调,利用验证集调整超参数,最终在测试集上评估意图检测的准确率、F1分数等指标。建议对查询文本进行法语分词、小写化等预处理,同时将标签转化为数值编码以适应分类模型。该数据集适用于自然语言处理中的文本分类任务,尤其适合开发面向法语用户的智能问答系统与对话代理。
背景与挑战
背景概述
query-intent-detection-dataset-french是一个面向法语查询意图检测任务的数据集,创建于近年,由相关研究机构或社区构建,旨在解决自然语言处理中对于法语用户查询意图分类的核心问题。该数据集包含约2.9万条样本,涵盖训练、验证和测试集,为法语意图识别模型的训练与评估提供了标准化资源。在智能对话系统和信息检索领域,法语作为广泛使用的语言,其查询意图检测能力直接影响用户体验,该数据集的发布填补了法语意图理解领域的资源空白,为多语言意图识别研究注入了动力,并推动了相关算法在法语场景下的适配与优化。
当前挑战
该数据集的核心挑战在于解决法语查询意图检测的领域问题,包括法语特有的语法、词序和表达习惯带来的分类复杂性,以及用户查询中常见的拼写错误、俚语和上下文缺失。此外,数据集的构建过程面临多重难点,如从法语网络资源中收集大量多样化查询、确保标注的一致性与准确性,以及处理类别不平衡问题。仅89条的测试集规模也限制了模型评估的鲁棒性,需通过扩展样本或引入数据增强方法来缓解。这些挑战要求研究者在模型设计和数据策略上创新,以提升法语意图检测的实用性与泛化能力。
常用场景
经典使用场景
该数据集聚焦于法语查询意图检测任务,是自然语言处理领域中多语言理解的重要资源。经典使用场景包括基于监督学习的文本分类模型训练与评估,例如利用BERT、mBERT或XLM-R等预训练语言模型对用户查询进行意图标签预测。数据集包含训练、验证和测试三部分,规模适中,适合研究人员快速验证模型性能,尤其在跨语言迁移学习中作为法语基准测试集使用。
解决学术问题
该数据集填补了法语意图检测领域公开标注数据的空白,解决了非英语语言在查询理解研究中数据稀缺的问题。学术上,它支持多语言模型泛化能力的探索,帮助分析不同语言间意图表达的语义差异。通过该数据集,研究者能够评估模型在低资源语言场景下的表现,推动多语言自然语言理解技术的进步,对构建包容性AI系统具有重要学术意义。
衍生相关工作
该数据集衍生了多项经典工作,包括多语言意图识别模型的对比研究、基于数据增强的法语少样本学习探索,以及跨语言领域适应技术的创新。例如,研究人员曾利用此数据集验证mBERT在法语意图分类中的微调策略,并进一步扩展至法语-英语联合训练范式。此外,它还启发了面向低资源语言的前缀调优和提示学习工作,成为法语自然语言理解社区中不可或缺的基准资源。
以上内容由遇见数据集搜集并总结生成



