crumb/neox-slimpajama-ul2-small-testing
收藏Hugging Face2023-08-08 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/crumb/neox-slimpajama-ul2-small-testing
下载链接
链接失效反馈官方服务：
资源简介：
---
dataset_info:
features:
- name: input_ids
sequence: int32
- name: labels
sequence: int64
splits:
- name: train
num_bytes: 25218296764
num_examples: 1996000
download_size: 6007000858
dataset_size: 25218296764
configs:
- config_name: default
data_files:
- split: train
path: data/train-*
---
# Dataset Card for "neox-slimpajama-ul2-small-testing"
Download size (bytes): 6,007,000,858
Dataset rows: 1,996,000
Tokenizer: [crumb/neox-ul2-tokenizer](https://huggingface.co/crumb/neox-ul2-tokenizer)
提供机构：
crumb
原始信息汇总
数据集概述
数据集信息
- 特征:
input_ids: 序列类型为int32labels: 序列类型为int64
- 分割:
train: 包含 1,996,000 个样本，总字节数为 25,218,296,764
数据集大小
- 下载大小: 6,007,000,858 字节
- 数据集大小: 25,218,296,764 字节
配置
- 配置名称:
default - 数据文件:
train: 路径为data/train-*
