five

ftopal/huggingface-datasets-embeddings

收藏
Hugging Face2024-04-23 更新2024-06-11 收录
下载链接:
https://hf-mirror.com/datasets/ftopal/huggingface-datasets-embeddings
下载链接
链接失效反馈
官方服务:
资源简介:
--- dataset_info: features: - name: sha dtype: string - name: text dtype: string - name: id dtype: string - name: tags sequence: string - name: created_at dtype: string - name: metadata dtype: string - name: last_modified dtype: string - name: arxiv sequence: string - name: languages sequence: string - name: tags_str dtype: string - name: text_str dtype: string - name: text_lists sequence: string - name: processed_texts sequence: string - name: tokens_length sequence: int64 - name: input_texts sequence: string - name: embeddings sequence: float32 splits: - name: train num_bytes: 750959701 num_examples: 52904 download_size: 331683974 dataset_size: 750959701 configs: - config_name: default data_files: - split: train path: data/train-* ---

数据集信息: 特征字段: - 名称:sha(安全哈希值),数据类型:字符串 - 名称:text,数据类型:字符串 - 名称:id,数据类型:字符串 - 名称:tags,数据类型:字符串序列 - 名称:created_at(创建时间),数据类型:字符串 - 名称:metadata(元数据),数据类型:字符串 - 名称:last_modified(最后修改时间),数据类型:字符串 - 名称:arxiv(arXiv预印本标识),数据类型:字符串序列 - 名称:languages(语言),数据类型:字符串序列 - 名称:tags_str(标签字符串),数据类型:字符串 - 名称:text_str(文本字符串),数据类型:字符串 - 名称:text_lists(文本列表),数据类型:字符串序列 - 名称:processed_texts(预处理文本),数据类型:字符串序列 - 名称:tokens_length(Token长度),数据类型:64位整型序列 - 名称:input_texts(输入文本),数据类型:字符串序列 - 名称:embeddings(嵌入向量),数据类型:32位浮点型序列 数据集划分: - 划分名称:train(训练集),数据字节数:750959701,样本数量:52904 下载大小:331683974 数据集总大小:750959701 配置项: - 配置名称:default(默认配置),数据文件: - 划分:train(训练集),文件路径:data/train-*
提供机构:
ftopal
原始信息汇总

数据集概述

数据集特征

  • sha: 字符串类型
  • text: 字符串类型
  • id: 字符串类型
  • tags: 字符串序列类型
  • created_at: 字符串类型
  • metadata: 字符串类型
  • last_modified: 字符串类型
  • arxiv: 字符串序列类型
  • languages: 字符串序列类型
  • tags_str: 字符串类型
  • text_str: 字符串类型
  • text_lists: 字符串序列类型
  • processed_texts: 字符串序列类型
  • tokens_length: 整数序列类型
  • input_texts: 字符串序列类型
  • embeddings: 浮点数序列类型

数据集分割

  • train:
    • 字节数: 750959701
    • 示例数: 52904

数据集大小

  • 下载大小: 331683974
  • 数据集大小: 750959701

配置

  • config_name: default
  • data_files:
    • split: train
    • path: data/train-*
二维码
社区交流群
二维码
科研交流群
商业服务