arcee-ai/general-dpo-datasets

该数据集包含多个配置，每个配置下有不同的特征和数据分割。特征包括来源（source）、系统（system）、提示（prompt）、选择（chosen）和拒绝（rejected）。选择（chosen）和拒绝（rejected）字段可能包含内容（content）和角色（role）信息。数据集主要用于偏好学习（DPO）任务，适用于训练和测试模型。

The dataset contains multiple configurations, each with different features and data splits. Features include source, system, prompt, chosen, and rejected. The chosen and rejected fields may contain content and role information. The dataset is primarily used for preference learning (DPO) tasks and is suitable for training and testing models.

原始信息汇总

数据集概述

数据集1: OpenHermesPreferences

• 特征:
  • source: 字符串类型
  • system: 空值类型
  • prompt: 字符串类型
  • chosen:
    • content: 字符串类型
    • role: 字符串类型
  • rejected:
    • content: 字符串类型
    • role: 字符串类型
• 分割:
  • train:
    • 字节数: 3958521757
    • 示例数: 989490
• 下载大小: 2037025378
• 数据集大小: 3958521757

数据集2: chatml-OpenHermes2.5-dpo-binarized-alpha

• 特征:
  • source: 字符串类型
  • system: 空值类型
  • prompt: 字符串类型
  • chosen: 字符串类型
  • rejected: 字符串类型
• 分割:
  • train:
    • 字节数: 22454870
    • 示例数: 8283
  • test:
    • 字节数: 2437738
    • 示例数: 914
• 下载大小: 14397048
• 数据集大小: 24892608

数据集3: distilabel-capybara-dpo-7k-binarized

• 特征:
  • source: 字符串类型
  • system: 空值类型
  • prompt: 字符串类型
  • chosen:
    • content: 字符串类型
    • role: 字符串类型
  • rejected:
    • content: 字符串类型
    • role: 字符串类型
• 分割:
  • train:
    • 字节数: 104488665
    • 示例数: 7563
• 下载大小: 53646978
• 数据集大小: 104488665

数据集4: distilabel-intel-orca-dpo-pairs

• 特征:
  • source: 字符串类型
  • system: 字符串类型
  • prompt: 字符串类型
  • chosen: 字符串类型
  • rejected: 字符串类型
• 分割:
  • train:
    • 字节数: 35237351
    • 示例数: 12859
• 下载大小: 19107458
• 数据集大小: 35237351

数据集5: truthy-dpo-v0.1

• 特征:
  • source: 字符串类型
  • system: 字符串类型
  • prompt: 字符串类型
  • chosen: 字符串类型
  • rejected: 字符串类型
• 分割:
  • train:
    • 字节数: 1322736
    • 示例数: 1016
• 下载大小: 625494
• 数据集大小: 1322736

数据集6: ultrafeedback-binarized-preferences-cleaned

• 特征:
  • source: 字符串类型
  • system: 空值类型
  • prompt: 字符串类型
  • chosen:
    • content: 字符串类型
    • role: 字符串类型
  • rejected:
    • content: 字符串类型
    • role: 字符串类型
• 分割:
  • train:
    • 字节数: 284546916
    • 示例数: 60917
• 下载大小: 143055200
• 数据集大小: 284546916