yehzw/opus-scratch
收藏Hugging Face2024-10-15 更新2025-10-25 收录
下载链接：
https://hf-mirror.com/datasets/yehzw/opus-scratch
下载链接
链接失效反馈官方服务：
资源简介：
---
dataset_info:
features:
- name: text1
sequence: int64
- name: lang1
dtype: string
- name: text2
sequence: int64
- name: lang2
dtype: string
- name: size1
dtype: int64
- name: size2
dtype: int64
splits:
- name: train
num_bytes: 15073801704.031382
num_examples: 48029684
- name: dev
num_bytes: 65055014.54750073
num_examples: 185416
- name: test
num_bytes: 61834031.75420536
num_examples: 185393
- name: zero
num_bytes: 15329670.06
num_examples: 29963
download_size: 3876113896
dataset_size: 15216020420.393087
configs:
- config_name: default
data_files:
- split: train
path: data/train-*
- split: dev
path: data/dev-*
- split: test
path: data/test-*
- split: zero
path: data/zero-*
---
数据集信息:
特征:
- 名称: text1
序列类型: int64
- 名称: lang1
数据类型: 字符串
- 名称: text2
序列类型: int64
- 名称: lang2
数据类型: 字符串
- 名称: size1
数据类型: int64
- 名称: size2
数据类型: int64
拆分:
- 名称: 训练集（train）
字节数: 15073801704.031382
样本数: 48029684
- 名称: 验证集（dev）
字节数: 65055014.54750073
样本数: 185416
- 名称: 测试集（test）
字节数: 61834031.75420536
样本数: 185393
- 名称: 零样本集（zero）
字节数: 15329670.06
样本数: 29963
下载大小: 3876113896
数据集大小: 15216020420.393087
配置:
- 配置名称: 默认（default）
数据文件:
- 拆分: 训练集（train）
路径: data/train-*
- 拆分: 验证集（dev）
路径: data/dev-*
- 拆分: 测试集（test）
路径: data/test-*
- 拆分: 零样本集（zero）
路径: data/zero-*
提供机构：
yehzw
