OALL/details_MTSAIR__MultiVerse_70B

该数据集是在评估模型MTSAIR/MultiVerse_70B时自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中生成的，每次运行在每个配置中表示为特定的分割，分割名称使用运行的时间戳。train分割始终指向最新的结果。此外，还有一个results配置，存储了所有运行的聚合结果。README还提供了如何使用Hugging Face datasets库加载数据集的示例，并包含了特定运行的最新结果。

原始信息汇总

数据集概述

数据集基本信息

• 名称: Evaluation run of MTSAIR/MultiVerse_70B
• 来源: 自动创建于模型 MTSAIR/MultiVerse_70B 的评估运行过程中。
• 配置数量: 136 个配置，每个配置对应一个评估任务。
• 创建次数: 1 次运行，每次运行结果存储在特定的分割中，分割名称使用运行的时间戳。
• 最新结果: "train" 分割始终指向最新的结果。

数据集结构

• 分割: 每个配置包含多个分割，分割名称基于运行的时间戳。
• 结果汇总: 额外配置 "results" 存储所有运行的汇总结果。

数据加载示例

python from datasets import load_dataset data = load_dataset("OALL/details_MTSAIR__MultiVerse_70B", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 时间戳: 2024-06-23T18:14:37.894608
• 结果示例: python { "all": { "acc_norm": 0.5348349377371134, "acc_norm_stderr": 0.03816525873942038, "acc": 0.7054930509596293, "acc_stderr": 0.011730206832052018 }, "community|acva:Algeria|0": { "acc_norm": 0.6564102564102564, "acc_norm_stderr": 0.03409627301409856 }, ... }