jbrinkma/pile-10m

---
license: mit
dataset_info:
features:
- name: text
dtype: string
- name: meta
struct:
- name: pile_set_name
dtype: string
splits:
- name: train
num_bytes: 56225913916
num_examples: 10000000
download_size: 29295343878
dataset_size: 56225913916
configs:
- config_name: default
data_files:
- split: train
path: data/train-*
---

---
许可证：MIT
数据集信息：
特征字段：
- 字段名：text，数据类型：字符串
- 字段名：meta，为结构体类型，包含子字段：
- 子字段名：pile_set_name，数据类型：字符串
数据集划分：
- 划分名称：训练集（train），字节占用量：56225913916，样本总数：10000000
下载大小：29295343878
数据集总大小：56225913916
配置项：
- 配置名称：default（默认配置）
数据文件：
- 划分集：训练集（train），文件路径：data/train-*
---

原始信息汇总

数据集概述

数据集特征

• text: 字符串类型
• meta: 结构化数据，包含子特征
  • pile_set_name: 字符串类型

数据集划分

• train:
  • 数据量: 56225913916 字节
  • 示例数量: 10000000

数据集大小

• 下载大小: 29295343878 字节
• 数据集大小: 56225913916 字节

数据文件配置

• config_name: default
• data_files:
  • split: train
  • path: data/train-*