arthurmluz/wikilingua_data-wiki_cstnews_1024_results

---
dataset_info:
features:
- name: id
dtype: int64
- name: text
dtype: string
- name: summary
dtype: string
- name: gen_summary
dtype: string
- name: rouge
struct:
- name: rouge1
dtype: float64
- name: rouge2
dtype: float64
- name: rougeL
dtype: float64
- name: rougeLsum
dtype: float64
- name: bert
struct:
- name: f1
sequence: float64
- name: hashcode
dtype: string
- name: precision
sequence: float64
- name: recall
sequence: float64
- name: moverScore
dtype: float64
splits:
- name: validation
num_bytes: 22895375
num_examples: 8165
download_size: 13549331
dataset_size: 22895375
configs:
- config_name: default
data_files:
- split: validation
path: data/validation-*
---
# Dataset Card for "wikilingua_data-wiki_cstnews_1024_results"

rouge= {'rouge1': 0.33338117664091194, 'rouge2': 0.12343918406188643, 'rougeL': 0.24055022727761752, 'rougeLsum': 0.24055022727761752}

bert= {'precision': 0.7445338318921713, 'recall': 0.7644032267581008, 'f1': 0.7533634330623368}

mover = 0.6152605452035328

原始信息汇总

数据集概述

数据集信息

• 特征列表:

  • id: 数据类型为 int64
  • text: 数据类型为 string
  • summary: 数据类型为 string
  • gen_summary: 数据类型为 string
  • rouge: 结构化数据，包含以下字段:
    • rouge1: 数据类型为 float64
    • rouge2: 数据类型为 float64
    • rougeL: 数据类型为 float64
    • rougeLsum: 数据类型为 float64
  • bert: 结构化数据，包含以下字段:
    • f1: 数据类型为 float64 序列
    • hashcode: 数据类型为 string
    • precision: 数据类型为 float64 序列
    • recall: 数据类型为 float64 序列
  • moverScore: 数据类型为 float64

• 数据分割:

  • validation: 包含 8165 个样本，总字节数为 22895375

• 数据集大小:

  • 下载大小: 13549331 字节
  • 数据集大小: 22895375 字节

配置信息

• 默认配置:
  • 数据文件路径: data/validation-*

评估指标

• ROUGE 指标:

  • rouge1: 0.33338117664091194
  • rouge2: 0.12343918406188643
  • rougeL: 0.24055022727761752
  • rougeLsum: 0.24055022727761752

• BERT 指标:

  • precision: 0.7445338318921713
  • recall: 0.7644032267581008
  • f1: 0.7533634330623368

• MoverScore:

  • 0.6152605452035328