YukiTomita-CC/ELYZA-tasks-100_Human_solved

该数据集是基于ELYZA-tasks-100的日语LLM评估数据集，包含输入（input）和输出（output）两个字段。输入直接来自ELYZA-tasks-100，输出则由该数据集的创建者提供。数据集主要用于日语LLM的评估，且已经通过GPT-4o和Claude 3.5 Sonnet进行了自动评分。数据集的许可证为CC BY-SA 4.0。

This dataset is based on the ELYZA-tasks-100, a Japanese LLM evaluation dataset, containing two fields: input and output. The input is directly taken from ELYZA-tasks-100, while the output is provided by the creator of this dataset. The dataset is primarily used for evaluating Japanese LLMs and has been automatically scored using GPT-4o and Claude 3.5 Sonnet. The dataset is licensed under CC BY-SA 4.0.

原始信息汇总

数据集概述

数据集信息

• 特征:
  • input: 类型为字符串
  • output: 类型为字符串
• 分割:
  • train: 包含100个样本，总大小为60451字节
• 下载大小: 39188字节
• 数据集大小: 60451字节
• 配置:
  • default: 数据文件路径为data/train-*
• 语言: 日语
• 规模: 样本数小于1000

数据来源

• input特征直接来源于elyza/ELYZA-tasks-100。
• output特征由本数据集的创建者原创。

评分

• GPT-4o自动评分结果：平均得分3.69点（+0.03 / -0.03）。
• Claude 3.5 Sonnet自动评分结果：平均得分4.42点（+0.02 / -0.02）。

许可证

• 本数据集基于ELYZA-tasks-100的许可证，采用CC BY-SA 4.0许可证。