hatakeyama-llm-team/japanese2010
收藏Hugging Face2024-03-21 更新2024-06-11 收录
下载链接：
https://hf-mirror.com/datasets/hatakeyama-llm-team/japanese2010
下载链接
链接失效反馈官方服务：
资源简介：
---
language:
- ja
---
# 日本語ウェブコーパス2010
- [こちら](https://www.s-yata.jp/corpus/nwc2010/)のデータをhuggingfaceにアップロードしたものです｡
- 2009 年度における著作権法の改正（平成21年通常国会 著作権法改正等について | 文化庁）に基づき，情報解析研究への利用に限って利用可能です｡
- 形態素解析を用いて､自動で句点をつけました｡
- 変換コード
- [変換スクリプト](./load_jap.py)
- [形態素解析など](./Touten.py)
提供机构：
hatakeyama-llm-team
