xwjiang2010/pile_dedupe_val
收藏官方服务：
资源简介：
--- dataset_info: features: - name: text dtype: string splits: - name: train num_bytes: 6062337711 num_examples: 1000000 download_size: 3343428302 dataset_size: 6062337711 configs: - config_name: default data_files: - split: train path: data/train-* --- # Dataset Card for "pile_dedupe_val" [More Information needed](https://github.com/huggingface/datasets/blob/main/CONTRIBUTING.md#how-to-contribute-to-the-dataset-cards)
提供机构：
xwjiang2010原始信息汇总
数据集概述
数据集信息
- 特征:
text: 数据类型为字符串 (dtype: string)
- 分割:
train: 包含1,000,000个样本，总字节数为6,062,337,711
- 下载大小: 3,343,428,302字节
- 数据集大小: 6,062,337,711字节
配置
- 配置名称: default
- 数据文件:
train: 路径为data/train-*
