heegyu/kowiki-sentences
收藏Hugging Face2022-10-06 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/heegyu/kowiki-sentences
下载链接
链接失效反馈官方服务：
资源简介：
该数据集是基于2022年10月1日的韩语维基百科，使用kss（backend=mecab）工具进行句子级别分割的结果。数据集中包含549,262篇文章和4,724,064个句子，排除了韩语比重低于50%或韩语字符少于10个的情况。
提供机构：
heegyu
原始信息汇总
数据集概述
许可协议
- CC BY-SA 3.0
语言
- 韩语
语言创建者
- 其他
多语言性
- 单语种
数据集大小
- 1M < n < 10M
任务类别
- 其他
数据描述
- 数据来源：20221001 韩语维基百科
- 处理工具：kss (backend=mecab)
- 数据内容：549262 篇文章，4724064 个句子
- 过滤条件：韩语占比低于50%或韩语字数少于10字的情况被排除
