pvduy/dpo_data

---
dataset_info:
features:
- name: prompt
dtype: string
- name: prompt_id
dtype: string
- name: chosen
list:
- name: content
dtype: string
- name: role
dtype: string
- name: rejected
list:
- name: content
dtype: string
- name: role
dtype: string
- name: messages
list:
- name: content
dtype: string
- name: role
dtype: string
- name: score_chosen
dtype: float64
- name: score_rejected
dtype: float64
- name: source
dtype: string
splits:
- name: train_sft
num_bytes: 393857938
num_examples: 60829
- name: test_sft
num_bytes: 6234825
num_examples: 985
- name: train_gen
num_bytes: 314218640
num_examples: 60829
- name: test_gen
num_bytes: 4986982
num_examples: 985
- name: train_prefs
num_bytes: 426294967
num_examples: 71882
- name: test_prefs
num_bytes: 12669331
num_examples: 1964
download_size: 647333879
dataset_size: 1158262683
configs:
- config_name: default
data_files:
- split: train_sft
path: data/train_sft-*
- split: test_sft
path: data/test_sft-*
- split: train_gen
path: data/train_gen-*
- split: test_gen
path: data/test_gen-*
- split: train_prefs
path: data/train_prefs-*
- split: test_prefs
path: data/test_prefs-*
---

原始信息汇总

数据集概述

数据特征

• prompt: 字符串类型
• prompt_id: 字符串类型
• chosen: 列表类型，包含以下字段：
  • content: 字符串类型
  • role: 字符串类型
• rejected: 列表类型，包含以下字段：
  • content: 字符串类型
  • role: 字符串类型
• messages: 列表类型，包含以下字段：
  • content: 字符串类型
  • role: 字符串类型
• score_chosen: 浮点数类型
• score_rejected: 浮点数类型
• source: 字符串类型

数据分割

• train_sft:
  • 字节数: 393857938
  • 样本数: 60829
• test_sft:
  • 字节数: 6234825
  • 样本数: 985
• train_gen:
  • 字节数: 314218640
  • 样本数: 60829
• test_gen:
  • 字节数: 4986982
  • 样本数: 985
• train_prefs:
  • 字节数: 426294967
  • 样本数: 71882
• test_prefs:
  • 字节数: 12669331
  • 样本数: 1964

数据集大小

• 下载大小: 647333879 字节
• 数据集大小: 1158262683 字节

配置

• config_name: default
  • data_files:
    • train_sft: data/train_sft-*
    • test_sft: data/test_sft-*
    • train_gen: data/train_gen-*
    • test_gen: data/test_gen-*
    • train_prefs: data/train_prefs-*
    • test_prefs: data/test_prefs-*