huggingface/datatrove-tests
收藏Hugging Face2024-05-05 更新2024-06-12 收录
下载链接：
https://hf-mirror.com/datasets/huggingface/datatrove-tests
下载链接
链接失效反馈官方服务：
资源简介：
该数据集用于datatrove测试，包含两个配置（sharding-1和sharding-3），每个配置包含一个训练集，训练集的特征为文本（text），数据类型为字符串（string）。每个训练集的大小为39字节，包含5个样本。每个分割包含相同的数据，但根据分割名称将数据分片到n个bin中。
该数据集用于datatrove测试，包含两个配置（sharding-1和sharding-3），每个配置包含一个训练集，训练集的特征为文本（text），数据类型为字符串（string）。每个训练集的大小为39字节，包含5个样本。每个分割包含相同的数据，但根据分割名称将数据分片到n个bin中。
提供机构：
huggingface
原始信息汇总
数据集概述
数据集配置
-
config_name: sharding-1
- 特征:
- 名称: text
- 数据类型: string
- 分割:
- 名称: train
- 字节数: 39
- 示例数: 5
- 下载大小: 769
- 数据集大小: 39
- 特征:
-
config_name: sharding-3
- 特征:
- 名称: text
- 数据类型: string
- 分割:
- 名称: train
- 字节数: 39
- 示例数: 5
- 下载大小: 2238
- 数据集大小: 39
- 特征:
数据文件路径
-
config_name: sharding-1
- 分割: train
- 路径: sharding-1/train-*
-
config_name: sharding-3
- 分割: train
- 路径: sharding-3/train-*
