HAERAE-HUB/Korean-Human-Judgements

Korean-Human-Judgements (KHJ)数据集包含694个三元组，每个三元组包括一个问题、答案A和答案B，并且标注了人类偏好。数据集来源于三个主要来源，并经过了严格的过滤过程以确保质量和适当性。

原始信息汇总

Korean-Human-Judgements (KHJ) 数据集概述

数据集信息

• 特征列表:
  • instruction: 字符串类型
  • reference: 字符串类型
  • model_a: 字符串类型
  • model_a_response: 字符串类型
  • model_b: 字符串类型
  • model_b_response: 字符串类型
  • result: 字符串类型
• 数据分割:
  • train: 包含 525 个样本，占用 2708373 字节
• 数据集大小:
  • 下载大小: 1275127 字节
  • 数据集大小: 2708373 字节

配置信息

• 默认配置:
  • 数据文件路径: data/train-*

数据集描述

• 该数据集包含 525 个实例，每个实例包含两个不同语言模型的响应。每个实例由人工评估者判断哪个响应更优。
• 数据集经过严格筛选，移除了包含性内容、排版错误或不构成明确指令的条目。
• 每个实例包括一个提示（指令）和一个参考答案，以支持更好的评估。