jbrinkma/pile-2m
收藏Hugging Face2024-05-06 更新2024-06-12 收录
下载链接：
https://hf-mirror.com/datasets/jbrinkma/pile-2m
下载链接
链接失效反馈官方服务：
资源简介：
---
license: mit
dataset_info:
features:
- name: text
dtype: string
- name: meta
struct:
- name: pile_set_name
dtype: string
splits:
- name: train
num_bytes: 11191340941
num_examples: 2000000
download_size: 5828201649
dataset_size: 11191340941
configs:
- config_name: default
data_files:
- split: train
path: data/train-*
---
提供机构：
jbrinkma
原始信息汇总
数据集概述
许可证
- MIT许可证
数据集信息
特征
- text: 数据类型为字符串（string）
- meta: 结构化数据，包含以下字段：
- pile_set_name: 数据类型为字符串（string）
数据划分
- train: 包含2,000,000个样本，总字节数为11,191,340,941
数据大小
- 下载大小: 5,828,201,649字节
- 数据集大小: 11,191,340,941字节
配置
- default: 包含训练数据文件，路径为
data/train-*
