OALL/details_abacusai__Smaug-Llama-3-70B-Instruct

该数据集是在模型abacusai/Smaug-Llama-3-70B-Instruct的评估运行过程中自动创建的，包含136个配置，每个配置对应一个评估任务。数据集由1次运行生成，每次运行的结果作为特定的split存储，split的名称使用运行的时间戳。train split始终指向最新的结果。此外，数据集还包含一个名为results的配置，存储了所有运行的聚合结果。README还提供了如何加载数据集的示例代码，并展示了最新的评估结果。

原始信息汇总

数据集概述

数据集名称

• pretty_name: Evaluation run of abacusai/Smaug-Llama-3-70B-Instruct

数据集创建

• 来源: 自动创建于模型abacusai/Smaug-Llama-3-70B-Instruct的评估运行过程中。
• 组成: 包含136个配置，每个配置对应一个评估任务。
• 创建次数: 由1次运行创建。
• 数据分割: 每个配置中的数据按照运行时间戳命名，"train"分割指向最新结果。
• 额外配置: 包含一个名为"results"的配置，存储所有运行的聚合结果。

数据加载示例

python from datasets import load_dataset data = load_dataset("OALL/details_abacusai__Smaug-Llama-3-70B-Instruct", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 结果存储: 存储于latest results from run 2024-05-26T14:34:14.705638。
• 结果内容: 包含多个任务的评估结果，每个任务的结果可在"results"配置和对应评估的"latest"分割中找到。