EleutherAI/pile-deduped-pythia-random-sampled
收藏Hugging Face2023-08-25 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/EleutherAI/pile-deduped-pythia-random-sampled
下载链接
链接失效反馈官方服务：
资源简介：
---
dataset_info:
features:
- name: Index
dtype: int64
- name: 70M
dtype: float64
- name: 160M
dtype: float64
- name: 410M
dtype: float64
- name: 1B
dtype: float64
- name: 1.4B
dtype: float64
- name: 2.8B
dtype: float64
- name: 6.9B
dtype: float64
- name: 12B
dtype: float64
- name: Tokens
sequence: uint16
splits:
- name: train
num_bytes: 1020000000
num_examples: 5000000
download_size: 915854656
dataset_size: 1020000000
---
# Dataset Card for "pile-deduped-pythia-random-sampled"
[More Information needed](https://github.com/huggingface/datasets/blob/main/CONTRIBUTING.md#how-to-contribute-to-the-dataset-cards)
提供机构：
EleutherAI
原始信息汇总
数据集概述
数据集特征
- Index：整数类型（int64）
- 70M：浮点类型（float64）
- 160M：浮点类型（float64）
- 410M：浮点类型（float64）
- 1B：浮点类型（float64）
- 1.4B：浮点类型（float64）
- 2.8B：浮点类型（float64）
- 6.9B：浮点类型（float64）
- 12B：浮点类型（float64）
- Tokens：序列类型（uint16）
数据集分割
- train：
- 数据量：1020000000字节
- 示例数量：5000000
数据集大小
- 下载大小：915854656字节
- 数据集大小：1020000000字节
