nlpso/m2m3_fine_tuning_ref_cmbert_iob2
收藏Hugging Face2023-02-22 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/nlpso/m2m3_fine_tuning_ref_cmbert_iob2
下载链接
链接失效反馈官方服务：
资源简介：
该数据集用于微调Jean-Baptiste/camembert-ner模型，以执行嵌套的命名实体识别（NER）任务。数据集包含19世纪巴黎的贸易目录条目。数据集采用M2和M3方法，类型为ground-truth，使用Jean-Baptiste/camembert-ner分词器，标记格式为IOB2。训练集包含6084个样本，开发集包含676个样本，测试集包含1685个样本。数据集包含多种实体类型，如人物或公司名称（PER）、人物或公司专业活动（ACT）、军事或民事区别（TITREH）、条目完整描述（DESC）、专业奖励（TITREP）、地址（SPAT）、街道名称（LOC）、街道号码（CARDINAL）和地理特征（FT）。
该数据集用于微调Jean-Baptiste/camembert-ner模型，以执行嵌套的命名实体识别（NER）任务。数据集包含19世纪巴黎的贸易目录条目。数据集采用M2和M3方法，类型为ground-truth，使用Jean-Baptiste/camembert-ner分词器，标记格式为IOB2。训练集包含6084个样本，开发集包含676个样本，测试集包含1685个样本。数据集包含多种实体类型，如人物或公司名称（PER）、人物或公司专业活动（ACT）、军事或民事区别（TITREH）、条目完整描述（DESC）、专业奖励（TITREP）、地址（SPAT）、街道名称（LOC）、街道号码（CARDINAL）和地理特征（FT）。
提供机构：
nlpso
原始信息汇总
m2m3_fine_tuning_ref_cmbert_iob2 数据集概述
简介
该数据集用于微调 Jean-Baptiste/camembert-ner 模型，针对嵌套命名实体识别任务，采用独立命名实体层方法 [M1]。数据包含19世纪巴黎商业目录条目。
数据集参数
- 方法：M2 和 M3
- 数据集类型：ground-truth
- 分词器：Jean-Baptiste/camembert-ner
- 标签格式：IOB2
- 数量：
- 训练集：6084
- 开发集：676
- 测试集：1685
- 关联微调模型：
实体类型
| 缩写 | 实体组（层级） | 描述 |
|---|---|---|
| O | 1 & 2 | 非命名实体 |
| PER | 1 | 人名或公司名 |
| ACT | 1 & 2 | 人或公司职业活动 |
| TITREH | 2 | 军事或民事区分 |
| DESC | 1 | 条目完整描述 |
| TITREP | 2 | 职业奖励 |
| SPAT | 1 | 地址 |
| LOC | 2 | 街道名称 |
| CARDINAL | 2 | 街道号码 |
| FT | 2 | 地理特征 |
如何使用该数据集
python from datasets import load_dataset
train_dev_test = load_dataset("nlpso/m2m3_fine_tuning_ref_cmbert_iob2")
