if001/oasst1_ja_ppl

该数据集是一个包含日语指令、输入和输出的数据集，每个条目都附有通过kenllm计算的perplexity评分。数据集的特征包括input、instruction、output以及它们各自的perplexity评分（input_ppl、instruction_ppl、output_ppl）和整体perplexity评分（full_ppl）。数据集是从另一个repository fork而来，主要用于自然语言处理任务。

原始信息汇总

数据集概述

许可证

• Apache 2.0

语言

• 日语

配置

• 默认配置
  • 数据文件路径: data/train-*

数据集信息

• 特征

  • input: 字符串类型
  • instruction: 字符串类型
  • output: 字符串类型
  • input_ppl: 64位整数类型
  • instruction_ppl: 64位整数类型
  • output_ppl: 64位整数类型
  • full_ppl: 64位整数类型

• 数据分割

  • train
    • 字节数: 60856874
    • 样本数: 55359

• 下载大小: 27216157

• 数据集大小: 60856874