iankur/SlimPajama-300M
收藏Hugging Face2024-05-29 更新2024-06-12 收录
下载链接：
https://hf-mirror.com/datasets/iankur/SlimPajama-300M
下载链接
链接失效反馈官方服务：
资源简介：
---
dataset_info:
features:
- name: text
dtype: string
- name: meta
struct:
- name: redpajama_set_name
dtype: string
- name: __index_level_0__
dtype: int64
splits:
- name: train
num_bytes: 1222939871.5
num_examples: 279939
- name: validation
num_bytes: 39109042
num_examples: 9347
- name: test
num_bytes: 40114950
num_examples: 9346
download_size: 764608304
dataset_size: 1302163863.5
configs:
- config_name: default
data_files:
- split: train
path: data/train-*
- split: validation
path: data/validation-*
- split: test
path: data/test-*
---
提供机构：
iankur
原始信息汇总
数据集概述
数据集特征
- text：字符串类型。
- meta：结构化数据，包含子特征
redpajama_set_name，类型为字符串。 - index_level_0：整数类型，64位。
数据集划分
- 训练集：包含279939个样本，总大小为1222939871.5字节。
- 验证集：包含9347个样本，总大小为39109042字节。
- 测试集：包含9346个样本，总大小为40114950字节。
数据集大小
- 下载大小：764608304字节。
- 数据集总大小：1302163863.5字节。
数据文件配置
- 默认配置：
- 训练集路径：
data/train-* - 验证集路径：
data/validation-* - 测试集路径：
data/test-*
- 训练集路径：
