five

nielsr/FUNSD_layoutlmv2

收藏
Hugging Face2022-10-25 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/nielsr/FUNSD_layoutlmv2
下载链接
链接失效反馈
官方服务:
资源简介:
FUNSD数据集是一个包含注释表单的集合,每个文档图像被调整为224x224大小。数据集的加载脚本来自LayoutLMv2的官方实现,并更新为不包含Detectron2依赖。

The FUNSD dataset is a collection of annotated form documents. Each document image is resized to 224×224 pixels. The data loading script for this dataset is derived from the official implementation of LayoutLMv2, and has been updated to remove the Detectron2 dependency.
提供机构:
nielsr
原始信息汇总

数据集概述

数据集描述

数据集总结

  • 名称: FUNSD
  • 描述: FUNSD数据集是一个包含注释的表单集合。与原始数据集相比,每个文档图像被调整为224x224像素。
  • 来源: 数据集加载脚本来自官方LayoutLMv2实现,并更新以排除任何Detectron2依赖。

支持的任务和排行榜

  • 信息: 待补充

语言

  • 信息: 待补充

数据集结构

数据实例

  • 示例: 数据集中的一个训练样本包含以下字段:
    • chunk_tags: 标签序列
    • id: 样本ID
    • pos_tags: 词性标签序列
    • tokens: 文本内容

数据字段

  • 描述: 所有分割的数据字段相同。

数据分割

  • 描述: 待补充

数据集创建

来源数据

  • 初始数据收集和标准化: 待补充
  • 源语言生产者: 待补充

注释

  • 注释过程: 待补充
  • 注释者: 待补充

个人和敏感信息

  • 信息: 待补充

使用数据的考虑

数据集的社会影响

  • 信息: 待补充

偏见讨论

  • 信息: 待补充

其他已知限制

  • 信息: 待补充

附加信息

数据集管理员

  • 信息: 待补充

许可信息

  • 信息: 待补充

引用信息

@article{DBLP:journals/corr/abs-1905-13538, author = {Guillaume Jaume and Hazim Kemal Ekenel and Jean{-}Philippe Thiran}, title = {{FUNSD:} {A} Dataset for Form Understanding in Noisy Scanned Documents}, journal = {CoRR}, volume = {abs/1905.13538}, year = {2019}, url = {http://arxiv.org/abs/1905.13538}, archivePrefix = {arXiv}, eprint = {1905.13538}, timestamp = {Mon, 03 Jun 2019 13:42:33 +0200}, biburl = {https://dblp.org/rec/journals/corr/abs-1905-13538.bib}, bibsource = {dblp computer science bibliography, https://dblp.org} }

贡献者

搜集汇总
数据集介绍
main_image_url
构建方式
在文档智能领域,表单理解是一项极具挑战性的任务,而FUNSD数据集正是为此而生。该数据集收集了众多真实场景下的扫描表单文档,并进行了精细的语义标注。在构建过程中,原始图像被统一缩放至224×224像素,以适应深度学习模型的输入要求。数据加载脚本源自LayoutLMv2的官方实现,经过优化后移除了对Detectron2的依赖,使得数据集更易于集成至各类自然语言处理与计算机视觉框架中。
使用方法
使用FUNSD数据集时,研究者可通过HuggingFace的datasets库直接加载,无需额外配置Detectron2等依赖。加载后的数据包含训练、验证等划分,每份样本均提供文本令牌、位置坐标及对应的标注标签。用户可将其直接用于训练序列标注模型或多模态预训练模型,例如LayoutLMv2。在模型评估时,建议采用官方划分标准,以确保结果的可比性与复现性。
背景与挑战
背景概述
FUNSD(Form Understanding in Noisy Scanned Documents)数据集由Guillaume Jaume、Hazim Kemal Ekenel和Jean-Philippe Thiran于2019年提出,旨在推动嘈杂扫描文档中的表单理解研究。该数据集聚焦于从复杂布局的文档中提取结构化信息,其核心研究问题涉及文本检测、语义分类和实体关系抽取。作为表单理解领域的基准数据集,FUNSD为LayoutLMv2等视觉语言模型提供了标准化的训练与评估平台,显著促进了文档人工智能的发展,特别是在处理真实世界中噪声干扰、布局多样性的场景下具有重要影响力。
当前挑战
FUNSD数据集所解决的领域挑战在于表单理解中的多模态信息融合,即如何有效整合文本语义、视觉布局和空间位置特征,以应对文档中文字重叠、倾斜、模糊等噪声干扰。在构建过程中,挑战包括对199份真实扫描表单的精细化标注,需逐像素界定文本区域并赋予语义类别(如问题、答案、标题),同时确保标注一致性;此外,原始文档的多样性(如不同字体、表格结构)增加了数据标准化的难度,而将图像统一缩放至224×224像素虽便于模型处理,却可能丢失细粒度空间信息,影响复杂布局的识别精度。
常用场景
经典使用场景
在文档智能领域,FUNSD数据集作为表单理解任务的核心基准,被广泛用于训练和评估能够从嘈杂扫描文档中提取结构化信息的模型。其经典使用场景聚焦于语义实体识别和关系抽取,即模型需准确识别文本块(如问题、答案、标题)并理解它们之间的层级与关联关系,从而还原表单的逻辑结构。研究者常基于该数据集对预训练语言模型进行微调,以验证其在复杂布局感知任务上的性能。
解决学术问题
该数据集有效解决了真实世界表单文档因噪声、字体多变及布局不规则导致的信息抽取难题。在学术研究中,它推动了视觉与文本信息融合的范式发展,使模型从单纯依赖文本序列转向同时捕捉空间位置和视觉特征。通过提供标准化的标注体系,FUNSD促进了表单理解任务的可复现研究,成为衡量布局感知模型(如LayoutLM系列)性能的基石,显著提升了文档级信息抽取的鲁棒性与准确性。
实际应用
在实际应用中,FUNSD数据集支撑了企业级文档自动化处理系统的构建,覆盖金融票据审核、税务表格录入及医疗问卷数字化等场景。基于该数据集训练的模型能够自动解析扫描表单中的关键字段(如日期、金额、签名),并建立字段间的逻辑关联,从而替代繁琐的人工录入。这一能力在智能办公、合规审查和档案管理等领域大幅提升了效率,降低了因人工操作引发的错误率。
数据集最近研究
最新研究方向
FUNSD数据集作为表单理解领域的标杆性资源,近期研究重心聚焦于多模态文档分析与预训练模型的深度融合。在LayoutLMv2等视觉-语言联合建模框架的推动下,该数据集被广泛用于评估模型在嘈杂扫描文档中精准定位文本实体与语义关系的能力。前沿方向包括利用自监督学习提升对非结构化表单的泛化性能,以及结合图神经网络捕捉布局拓扑结构,以应对现实场景中表格、复选框等复杂元素的交互理解。此外,随着文档智能在金融、政务等行业的应用深化,FUNSD驱动的技术正推动表单自动化处理从规则依赖向数据驱动转型,显著降低了人工标注成本,为构建高鲁棒性的文档理解系统奠定了关键基准。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务