marsggbo/xsum_switch32_token_real_and_predicted_patterns
收藏资源简介:
--- dataset_info: features: - name: prompt_text dtype: string - name: prompt_ids sequence: int64 - name: decode_ids sequence: int64 - name: prompt_pattern sequence: sequence: int64 - name: decode_pattern sequence: sequence: int64 - name: predictor_pattern sequence: sequence: sequence: int64 splits: - name: train num_bytes: 691071413 num_examples: 34000 download_size: 79770784 dataset_size: 691071413 configs: - config_name: default data_files: - split: train path: data/train-* ---
数据集信息: 特征: - 名称:提示文本(prompt_text),数据类型:字符串(string) - 名称:提示ID序列(prompt_ids),数据类型:64位整数序列 - 名称:解码ID序列(decode_ids),数据类型:64位整数序列 - 名称:提示模式(prompt_pattern),数据类型:嵌套两层的64位整数序列(即序列的序列,元素为64位整数) - 名称:解码模式(decode_pattern),数据类型:嵌套两层的64位整数序列(即序列的序列,元素为64位整数) - 名称:预测器模式(predictor_pattern),数据类型:嵌套三层的64位整数序列(即序列的序列的序列,元素为64位整数) 数据拆分: - 名称:训练集(train),字节占用量:691071413,样本数量:34000 下载大小:79770784字节 数据集总大小:691071413字节 数据集配置: - 配置名称:默认配置(default),数据文件: - 数据拆分:训练集(train),文件路径:data/train-*



