arthurmluz/temario_data-wiki_1024_results

---
dataset_info:
features:
- name: id
dtype: string
- name: text
dtype: string
- name: summary
dtype: string
- name: gen_summary
dtype: string
- name: rouge
struct:
- name: rouge1
dtype: float64
- name: rouge2
dtype: float64
- name: rougeL
dtype: float64
- name: rougeLsum
dtype: float64
- name: bert
struct:
- name: f1
sequence: float64
- name: hashcode
dtype: string
- name: precision
sequence: float64
- name: recall
sequence: float64
- name: moverScore
dtype: float64
splits:
- name: validation
num_bytes: 206635
num_examples: 25
download_size: 163078
dataset_size: 206635
configs:
- config_name: default
data_files:
- split: validation
path: data/validation-*
---
# Dataset Card for "temario_data-wiki_1024_results"

Results of the model arthurmluz/ptt5-wikilingua-1024 on the dataset godoyj/temario.

'gen_summary' is the generated summary, and both bertScore and Rouge metrics calculated.

mean metrics:

rouge= {'rouge1': 0.1737841100453722, 'rouge2': 0.05694408293393681, 'rougeL': 0.12373628458017233, 'rougeLsum': 0.12373628458017233}

bert= {'precision': 0.7249869775772094, 'recall': 0.620260682106018, 'f1': 0.6683329963684081}

mover = 0.5512191986770616

原始信息汇总

数据集概述

数据集信息

特征

• id: 字符串类型
• text: 字符串类型
• summary: 字符串类型
• gen_summary: 字符串类型
• rouge: 结构体类型，包含以下字段：
  • rouge1: 浮点数类型
  • rouge2: 浮点数类型
  • rougeL: 浮点数类型
  • rougeLsum: 浮点数类型
• bert: 结构体类型，包含以下字段：
  • f1: 浮点数序列类型
  • hashcode: 字符串类型
  • precision: 浮点数序列类型
  • recall: 浮点数序列类型
• moverScore: 浮点数类型

数据分割

• validation: 包含25个样本，总字节数为206635

数据集大小

• 下载大小: 163078字节
• 数据集大小: 206635字节

配置

• default: 包含验证集文件路径为data/validation-*

模型结果

生成摘要

• gen_summary: 生成的摘要

评估指标

• rouge:
  • rouge1: 0.1737841100453722
  • rouge2: 0.05694408293393681
  • rougeL: 0.12373628458017233
  • rougeLsum: 0.12373628458017233
• bert:
  • precision: 0.7249869775772094
  • recall: 0.620260682106018
  • f1: 0.6683329963684081
• moverScore: 0.5512191986770616