OALL/details_vicgalle__ConfigurableHermes-7B

该数据集是在vicgalle/ConfigurableHermes-7B模型的评估运行过程中自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集从1次运行中创建，每次运行的结果作为一个特定的分割存储在配置中，分割名称使用运行的时间戳命名。train分割始终指向最新的结果。此外，还有一个名为results的配置存储了所有运行的聚合结果。

This dataset was automatically created during the evaluation run of the model vicgalle/ConfigurableHermes-7B. The dataset is composed of 136 configurations, each corresponding to one of the evaluated tasks. The dataset has been created from 1 run, with each runs results stored as a specific split in each configuration, named using the timestamp of the run. The train split always points to the latest results. Additionally, a configuration named results stores all the aggregated results of the run.

原始信息汇总

数据集概述

数据集基本信息

• 名称: Evaluation run of vicgalle/ConfigurableHermes-7B
• 创建方式: 自动创建，用于评估模型 vicgalle/ConfigurableHermes-7B
• 配置数量: 136 个配置，每个配置对应一个评估任务
• 创建次数: 1 次

数据集结构

• 分割方式: 每个配置包含多个分割，分割名称使用运行的时间戳
• 训练分割: "train" 分割指向最新的结果
• 结果配置: 额外配置 "results" 存储所有聚合结果

数据加载示例

python from datasets import load_dataset data = load_dataset("OALL/details_vicgalle__ConfigurableHermes-7B", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 时间戳: 2024-06-18T06:20:46.614451
• 结果示例: python { "all": { "acc_norm": 0.42992125212730625, "acc_norm_stderr": 0.03813233788180786, "acc": 0.5486432825943084, "acc_stderr": 0.012806088966122401 }, "community|acva:Algeria|0": { "acc_norm": 0.5487179487179488, "acc_norm_stderr": 0.03572709860318392 }, ... }