OALL/details_vicgalle__Configurable-Hermes-2-Pro-Llama-3-8B
收藏Hugging Face2024-06-13 更新2024-06-29 收录
下载链接：
https://hf-mirror.com/datasets/OALL/details_vicgalle__Configurable-Hermes-2-Pro-Llama-3-8B
下载链接
链接失效反馈官方服务：
资源简介：
该数据集是在模型vicgalle/Configurable-Hermes-2-Pro-Llama-3-8B的评估运行过程中自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行都可以在特定配置中找到，分割名称使用运行的时间戳命名。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置存储了所有运行的聚合结果。README还提供了加载数据集的具体代码示例，并展示了最新的评估结果。
该数据集是在模型vicgalle/Configurable-Hermes-2-Pro-Llama-3-8B的评估运行过程中自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行都可以在特定配置中找到，分割名称使用运行的时间戳命名。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置存储了所有运行的聚合结果。README还提供了加载数据集的具体代码示例，并展示了最新的评估结果。
提供机构：
OALL
原始信息汇总
数据集概述
数据集基本信息
- 数据集名称: Evaluation run of vicgalle/Configurable-Hermes-2-Pro-Llama-3-8B
- 数据集来源: 自动创建于模型评估过程中
- 数据集组成: 包含136个配置，每个配置对应一个评估任务
- 数据集创建: 从1次运行中生成，每次运行结果存储为特定分片，分片名称使用运行时间戳
- 分片信息:
- "train"分片指向最新结果
- "results"配置存储所有运行结果的聚合
数据加载示例
python from datasets import load_dataset data = load_dataset("OALL/details_vicgalle__Configurable-Hermes-2-Pro-Llama-3-8B", "lighteval_xstory_cloze_ar_0", split="train")
最新结果
- 最新结果时间戳: 2024-06-13T02:20:41.227653
- 结果示例: python { "all": { "acc_norm": 0.4289527872031849, "acc_norm_stderr": 0.037761462775334105, "acc": 0.6393117140966248, "acc_stderr": 0.012357592682139025 }, "community|acva:Algeria|0": { "acc_norm": 0.5230769230769231, "acc_norm_stderr": 0.0358596530894741 }, ... }
