rulins/FineWeb-Edu-1MT
收藏Hugging Face2024-07-16 更新2024-07-22 收录
下载链接:
https://hf-mirror.com/datasets/rulins/FineWeb-Edu-1MT
下载链接
链接失效反馈官方服务:
资源简介:
该数据集是FineWeb-Edu的一个子集,随机采样自整个数据集,大约包含100万个GPT2 tokens。该数据集是为了在retrieval-scaling项目中展示目的而创建的,并明确要求不要分发。
A subset of FineWeb-Edu randomly sampled from the whole dataset of around 1M gpt2 tokens. This dataset is created for illustration purpose in retrieval-scaling and should not be distributed.
提供机构:
rulins
原始信息汇总
数据集概述
数据集名称
- FineWeb-Edu 子集
数据集来源
- 从 FineWeb-Edu 数据集中随机抽样
数据集规模
- 约 1M gpt2 标记
数据集用途
- 用于 retrieval-scaling 项目的示例
数据集许可
- MIT 许可证
注意事项
- 请勿分发



