BaiqingL/pokemon-rag-mistral-tokenized

--- dataset_info: features: - name: input_ids sequence: int32 - name: attention_mask sequence: int8 - name: labels sequence: int64 splits: - name: train num_bytes: 79618892856 num_examples: 2989146 download_size: 3566147442 dataset_size: 79618892856 configs: - config_name: default data_files: - split: train path: data/train-* ---数据集信息： 特征： - 名称：输入序列标识（input_ids），数据类型：32位整数序列 - 名称：注意力掩码（attention_mask），数据类型：8位整数序列 - 名称：标签（labels），数据类型：64位整数序列 数据分割： - 名称：训练集（train），字节占用量：79618892856，样本总数：2989146 下载体积：3566147442，数据集总字节占用量：79618892856 配置项： - 配置名称：默认配置（default），数据文件： - 数据分割：训练集，文件路径：data/train-*