OALL/details_FreedomIntelligence__AceGPT-7B

该数据集是在评估模型FreedomIntelligence/AceGPT-7B时自动创建的，包含136个配置，每个配置对应一个评估任务。数据集由1次运行生成，每次运行的结果作为一个特定的分割存储在配置中，分割名称使用运行的时间戳。train分割始终指向最新的结果。此外，还有一个名为results的配置存储了所有运行的聚合结果。

原始信息汇总

数据集概述

数据集名称

• Evaluation run of FreedomIntelligence/AceGPT-7B

数据集创建

• 创建原因: 自动创建于模型FreedomIntelligence/AceGPT-7B的评估运行过程中。
• 数据组成: 包含136个配置，每个配置对应一个评估任务。
• 数据来源: 数据集由1次运行创建，每次运行作为一个特定的分割，分割名称使用运行的时间戳。
• 特殊配置: 额外配置“results”存储了所有运行的聚合结果。

数据集使用

• 加载示例: python from datasets import load_dataset data = load_dataset("OALL/details_FreedomIntelligence__AceGPT-7B", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 结果概览: 提供了每个任务的归一化准确率和标准误差。
• 示例结果: python { "all": { "acc_norm": 0.364200742521248, "acc_norm_stderr": 0.03730494407105383, "acc": 0.6300463269358041, "acc_stderr": 0.01242428600292387 }, ... }

以上信息总结了数据集的基本结构、创建背景、使用方法以及关键结果，为理解和使用该数据集提供了清晰的指导。