anthj/dpo_mw_new

该数据集包含用于训练和评估的问答对，每个例子包括一个问题（question）、一个被选中的答案（chosen）和一个被拒绝的答案（rejected）。数据集分为训练集和评估集，训练集包含1157600个例子，评估集包含289400个例子。

This dataset contains question-answer pairs for training and evaluation, with each example including a question, a chosen answer, and a rejected answer. The dataset is divided into a training set with 1,157,600 examples and an evaluation set with 289,400 examples.

原始信息汇总

数据集概述

数据集特征

• question: 数据类型为字符串。
• chosen: 数据类型为字符串。
• rejected: 数据类型为字符串。
• index_level_0: 数据类型为整数（int64）。

数据集分割

• train:
  • 字节数: 1494048479
  • 样本数: 1157600
• eval:
  • 字节数: 373634938
  • 样本数: 289400

数据集大小

• 下载大小: 457620439 字节
• 总数据集大小: 1867683417 字节

配置信息

• 配置名称: default
  • 数据文件:
    • train: data/train-*
    • eval: data/eval-*