annamkiepura99/arxiv-discussion-papers

--- dataset_info: features: - name: paper_id dtype: string - name: _pdf_hash dtype: 'null' - name: _source_hash dtype: string - name: _source_name dtype: string - name: metadata struct: - name: authors dtype: string - name: categories dtype: string - name: doi dtype: string - name: id dtype: string - name: journal_ref dtype: string - name: license dtype: string - name: title dtype: string - name: abstract struct: - name: cite_spans list: 'null' - name: ref_spans list: 'null' - name: section dtype: string - name: text dtype: string - name: body_text list: - name: cite_spans list: - name: end dtype: int64 - name: ref_id dtype: string - name: start dtype: int64 - name: text dtype: string - name: content_type dtype: string - name: ref_spans list: - name: end dtype: int64 - name: ref_id dtype: string - name: start dtype: int64 - name: text dtype: string - name: sec_number dtype: string - name: sec_type dtype: string - name: section dtype: string - name: text dtype: string - name: bib_entries dtype: string - name: ref_entries dtype: string - name: discussion_cited_papers dtype: string splits: - name: train num_bytes: 80362342 num_examples: 167 download_size: 37742167 dataset_size: 80362342 configs: - config_name: default data_files: - split: train path: data/train-* ---数据集信息： 特征列： - 字段名：论文ID（paper_id），数据类型：字符串（string） - 字段名：PDF哈希值（_pdf_hash），数据类型：空值（null） - 字段名：源哈希值（_source_hash），数据类型：字符串（string） - 字段名：源名称（_source_name），数据类型：字符串（string） - 字段名：元数据（metadata），为结构体，包含以下子字段： - 字段名：作者（authors），数据类型：字符串（string） - 字段名：分类（categories），数据类型：字符串（string） - 字段名：DOI（doi），数据类型：字符串（string） - 字段名：标识符（id），数据类型：字符串（string） - 字段名：期刊引用（journal_ref），数据类型：字符串（string） - 字段名：许可协议（license），数据类型：字符串（string） - 字段名：标题（title），数据类型：字符串（string） - 字段名：摘要（abstract），为结构体，包含以下子字段： - 字段名：引用跨度（cite_spans），列表类型，空值（null） - 字段名：参考文献跨度（ref_spans），列表类型，空值（null） - 字段名：章节（section），数据类型：字符串（string） - 字段名：文本（text），数据类型：字符串（string） - 字段名：正文文本（body_text），为列表类型，列表元素包含以下字段： - 字段名：引用跨度（cite_spans），列表类型，每个列表项包含： - 字段名：结束位置（end），数据类型：64位整数（int64） - 字段名：引用ID（ref_id），数据类型：字符串（string） - 字段名：起始位置（start），数据类型：64位整数（int64） - 字段名：文本（text），数据类型：字符串（string） - 字段名：内容类型（content_type），数据类型：字符串（string） - 字段名：参考文献跨度（ref_spans），列表类型，每个列表项包含： - 字段名：结束位置（end），数据类型：64位整数（int64） - 字段名：引用ID（ref_id），数据类型：字符串（string） - 字段名：起始位置（start），数据类型：64位整数（int64） - 字段名：文本（text），数据类型：字符串（string） - 字段名：章节编号（sec_number），数据类型：字符串（string） - 字段名：章节类型（sec_type），数据类型：字符串（string） - 字段名：章节名称（section），数据类型：字符串（string） - 字段名：文本（text），数据类型：字符串（string） - 字段名：参考文献条目（bib_entries），数据类型：字符串（string） - 字段名：引用条目（ref_entries），数据类型：字符串（string） - 字段名：讨论引用论文（discussion_cited_papers），数据类型：字符串（string） 数据集划分： - 划分名称：训练集（train），字节大小：80362342，样本数量：167 下载总大小：37742167，数据集总存储大小：80362342 配置项： - 配置名称：默认配置（default），数据文件： - 划分：训练集（train），文件路径：data/train-*