five

中文人名语料库

收藏
github2018-11-01 更新2024-05-31 收录
下载链接:
https://github.com/lljxx1/Chinese-Names-Corpus
下载链接
链接失效反馈
官方服务:
资源简介:
包含120万常见中文人名、25万古代中文人名、1万日本常见人名、2万英文常见姓或名、1千个中文姓氏以及5千称呼词根和18万中文称呼。

This dataset comprises 1.2 million common Chinese personal names, 250,000 ancient Chinese personal names, 10,000 common Japanese personal names, 20,000 common English surnames or given names, 1,000 Chinese surnames, as well as 5,000 appellation roots and 180,000 Chinese appellations.
创建时间:
2017-04-12
原始信息汇总

中文人名语料库(Chinese-Names-Corpus)概述

数据集内容

  • 常见中文人名:包含120万人名,已删除名人姓名。
  • 古代中文人名:包含25万人名,已删除罕见姓和部分带生僻字的人名。
  • 日本常见人名:包含1万人名,数据来源于网络。
  • 英文常见姓或名:包含2万人名,数据来源于网络。
  • 中文姓氏:包含1千个姓氏,已删除罕见姓,复姓仅保留“欧阳”。
  • 称呼词根:包含5千个词根,衍生出18万中文称呼。

后续更新计划

  • 翻译人名:预计将增加10万个翻译人名。
搜集汇总
数据集介绍
main_image_url
构建方式
中文人名语料库的构建采取了对各类中文人名进行广泛收集与整理的方式,涵盖常见人名、古代人名、日本及英文人名,以及中文姓氏和称呼词根,旨在为自然语言处理领域提供丰富的人名语料资源。该数据集删除了名人姓名、罕见姓、生僻字人名,以及部分复姓,以提升数据质量与实用性。
特点
该数据集具有鲜明的特点,包含120万常见中文人名,25万古代中文人名,以及1万日本和2万英文常见人名,另外还收录了1千个中文姓氏和5千称呼词根,共计18万中文称呼。数据的多样性和规模使其成为研究人名及其文化特征的重要资源。值得注意的是,罕见姓和部分复姓已被剔除,以确保数据集的纯净度和可用性。
使用方法
使用中文人名语料库时,用户可以直接获取并应用于自然语言处理、机器学习模型训练、人名识别等研究领域。数据集以简洁的文本格式存储,便于导入和处理。用户在使用前应确保对数据集的构成有充分的了解,并根据具体研究需求进行适当的预处理。此外,数据集维护者计划更新翻译人名,进一步丰富语料库的内容,扩展其应用范围。
背景与挑战
背景概述
中文人名语料库,作为自然语言处理领域的重要资源,其创建旨在为研究者提供一份详尽且实用的中文人名数据集。该语料库由@思南斋整理,并于2017年4月2日完成初步构建。它包含了120万常见中文人名,以及25万古代中文人名,旨在解决中文命名实体识别等问题,对自然语言处理、机器学习等领域产生了显著影响。
当前挑战
在构建过程中,数据集面临了如何筛选和整理有效人名信息的挑战,确保数据的准确性和可用性。此外,该数据集在解决领域问题,如中文命名实体识别时,还需克服多音字、同姓同名、以及姓名文化差异等所带来的挑战。未来,数据集的更新工作,如翻译人名的添加,也提出了如何保持数据一致性和扩展性的新问题。
常用场景
经典使用场景
在自然语言处理领域中,中文人名语料库被广泛用于训练和评估姓名识别模型。该数据集的典型应用场景是构建能够准确识别文本中中文人名的命名实体识别系统,这对于提高文本理解的准确性和细粒度信息提取至关重要。
实际应用
在现实应用中,中文人名语料库被用于搜索引擎、社交媒体、信息检索系统等领域,以增强这些系统对中文人名的识别能力,进而改善用户体验和信息处理的精准度。
衍生相关工作
基于中文人名语料库的研究衍生出了许多相关工作,如人名标准化、人名消歧义、以及跨语言的人名翻译等,这些研究进一步扩展了该数据集的应用范围,推动了相关领域的学术进步。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务