hac541309/multilingual_tokenizers
收藏Hugging Face2023-10-30 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/hac541309/multilingual_tokenizers
下载链接
链接失效反馈官方服务：
资源简介：
---
license: other
---
Collection of tokenizers from various sources.
My own are Apache 2.0 but others are not.
They are each accompanied by their license.
提供机构：
hac541309
原始信息汇总
数据集概述
数据集名称
Collection of tokenizers from various sources
许可证信息
- 数据集中包含的tokenizers来自不同来源，许可证各不相同。
- 作者自己的tokenizers遵循Apache 2.0许可证。
- 其他tokenizers附带各自的许可证。
