mlfoundations-dev/opengpt_entropy

--- dataset_info: features: - name: language dtype: string - name: quantity dtype: int64 - name: task dtype: string - name: instruction dtype: string - name: input dtype: string - name: output dtype: string - name: conversations list: - name: from dtype: string - name: value dtype: string - name: entropy dtype: float64 splits: - name: train num_bytes: 7925590 num_examples: 4621 download_size: 4091073 dataset_size: 7925590 configs: - config_name: default data_files: - split: train path: data/train-* ---数据集信息： 特征字段： - 名称：language（语言），数据类型：字符串 - 名称：quantity（数量），数据类型：64位整型 - 名称：task（任务），数据类型：字符串 - 名称：instruction（指令），数据类型：字符串 - 名称：input（输入），数据类型：字符串 - 名称：output（输出），数据类型：字符串 - 名称：conversations（对话列表），为列表类型，列表元素为包含两个子字段的结构体： - 子字段名：from（对话来源），数据类型：字符串 - 子字段名：value（对话内容），数据类型：字符串 - 名称：entropy（熵），数据类型：双精度浮点型（float64） 数据集拆分： - 拆分名称：train（训练集），字节大小：7925590，样本数量：4621 下载大小：4091073 数据集总大小：7925590 配置项： - 配置名称：default（默认配置），数据文件配置： - 对应拆分：train（训练集），文件路径：data/train-*