HachiML/oasst1_for_self-rewarding_IFT

该数据集是基于kunishou/oasst1-89k-ja和OpenAssistant/oasst1创建的，用于self-rewarding的指令微调数据(IFT)。数据集包含4,744个例子，比Self-rewarding论文中使用的3,200个例子更多。数据集的特征包括消息树ID、提示者消息ID、助手消息ID、指令、输入、输出、助手和提示者的去毒化评分、助手和提示者的标签等。数据集的语言为日语，许可证为Apache-2.0，任务类别为文本生成，标签包括self-rewarding和oasst1。

原始信息汇总

数据集概述

数据集特征

• message_tree_id: 字符串类型
• prompter_message_id: 字符串类型
• assistant_message_id: 字符串类型
• instruction: 字符串类型
• input: 字符串类型
• output: 字符串类型
• assistant_detoxify: 结构体类型，包含以下子特征：
  • identity_attack: 浮点数64位
  • insult: 浮点数64位
  • obscene: 浮点数64位
  • severe_toxicity: 浮点数64位
  • sexual_explicit: 浮点数64位
  • threat: 浮点数64位
  • toxicity: 浮点数64位
• prompter_detoxify: 结构体类型，包含以下子特征：
  • identity_attack: 浮点数64位
  • insult: 浮点数64位
  • obscene: 浮点数64位
  • severe_toxicity: 浮点数64位
  • sexual_explicit: 浮点数64位
  • threat: 浮点数64位
  • toxicity: 浮点数64位
• assistant_labels: 结构体类型，包含以下子特征：
  • count: 整数32位序列
  • name: 字符串序列
  • value: 浮点数64位序列
• prompter_labels: 结构体类型，包含以下子特征：
  • count: 整数32位序列
  • name: 字符串序列
  • value: 浮点数64位序列

数据集划分

• train: 训练集，包含4744个样本，数据大小为10327876字节，下载大小为4458529字节。

数据集配置

• config_name: default
• data_files:
  • split: train
  • path: data/train-*

许可证

• license: Apache-2.0

任务类别

• task_categories: text-generation

语言

• language: Japanese

标签

• tags: self-rewarding, oasst1

大小类别

• size_categories: 1K<n<10K