open-llm-leaderboard/details_ichigoberry__pandafish-2-7b-32k

该数据集是在评估模型ichigoberry/pandafish-2-7b-32k时自动创建的，包含63个配置，每个配置对应一个评估任务。数据集由1次运行的详细信息组成，每次运行的结果存储在不同的分割中，分割名称为运行的时间戳。train分割始终指向最新的结果。此外，还有一个名为results的配置存储了所有运行的聚合结果，用于在Open LLM Leaderboard上计算和显示聚合指标。

原始信息汇总

数据集概述

数据集名称

• Evaluation run of ichigoberry/pandafish-2-7b-32k

数据集创建

• 自动创建：该数据集是在评估模型ichigoberry/pandafish-2-7b-32k的运行过程中自动生成的。
• 评估平台：评估运行在Open LLM Leaderboard上进行。

数据集结构

• 配置数量：包含63个配置，每个配置对应一个评估任务。
• 数据来源：数据集由1次运行创建，每次运行对应一个特定的分割，分割名称基于运行的时间戳。
• 分割类型：包括"train"分割（指向最新结果）和"results"配置（存储所有聚合结果，用于计算和显示聚合指标）。

数据加载示例

python from datasets import load_dataset data = load_dataset("open-llm-leaderboard/details_ichigoberry__pandafish-2-7b-32k", "harness_winogrande_5", split="train")

最新结果

• 结果来源：最新结果来自2024-04-05T09:25:19.249086。
• 结果内容：包括多个任务的评估结果，如准确率（acc）、标准误差（acc_stderr）等。

数据集配置详情

配置列表

• harness_arc_challenge_25
• harness_gsm8k_5
• harness_hellaswag_10
• harness_hendrycksTest_5

每个配置包含多个数据文件，分别对应不同的任务和时间戳，确保数据的最新性和完整性。