arthurmluz/wikilingua_data-wiki_1024_results

数据集wikilingua_data-wiki_1024_results包含多个特征字段，如id、text、summary、gen_summary、rouge、bert和moverScore。其中rouge和bert是结构化数据，分别包含多个子字段。数据集仅包含一个验证集，大小为21885909字节，包含8165个样本。文件还提供了rouge、bert和moverScore的评估结果。

原始信息汇总

数据集概述

数据集信息

• 特征列表:

  • id: 数据类型为 int64
  • text: 数据类型为 string
  • summary: 数据类型为 string
  • gen_summary: 数据类型为 string
  • rouge: 结构化数据，包含以下字段:
    • rouge1: 数据类型为 float64
    • rouge2: 数据类型为 float64
    • rougeL: 数据类型为 float64
    • rougeLsum: 数据类型为 float64
  • bert: 结构化数据，包含以下字段:
    • f1: 序列类型为 float64
    • hashcode: 数据类型为 string
    • precision: 序列类型为 float64
    • recall: 序列类型为 float64
  • moverScore: 数据类型为 float64

• 数据分割:

  • validation: 包含 8165 个样本，总字节数为 21885909

• 数据集大小:

  • 下载大小: 12842290 字节
  • 实际大小: 21885909 字节

配置信息

• 默认配置:
  • 数据文件路径: data/validation-*

评估指标

• ROUGE 指标:

  • rouge1: 0.3547652574772463
  • rouge2: 0.1505956971978055
  • rougeL: 0.2785170891387953
  • rougeLsum: 0.2785170891387953

• BERT 指标:

  • precision: 0.7906573472691691
  • recall: 0.7655439093188866
  • f1: 0.7771048831560097

• MoverScore:

  • 0.6245790568121278