OALL/details_paloalma__Le_Triomphant-ECE-TW3

该数据集是在模型paloalma/Le_Triomphant-ECE-TW3的评估运行过程中自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行都可以在特定配置中找到，分割名称使用运行的时间戳命名。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置存储了所有运行的聚合结果。README还提供了如何加载运行细节的示例代码，并展示了最新运行的结果。

原始信息汇总

数据集概述

数据集名称

• Evaluation run of paloalma/Le_Triomphant-ECE-TW3

数据集描述

• 创建目的: 自动创建于模型paloalma/Le_Triomphant-ECE-TW3的评估运行过程中。
• 组成: 包含136个配置，每个配置对应一个评估任务。
• 创建过程: 数据集由1次运行创建，每次运行在每个配置中作为一个特定的分割存在，分割名称使用运行的时间戳。
• 额外配置: 包含一个名为"results"的配置，存储所有运行的聚合结果。

数据集使用示例

python from datasets import load_dataset data = load_dataset("OALL/details_paloalma__Le_Triomphant-ECE-TW3", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 结果来源: 来自2024-06-07T14:24:23.695335的运行。
• 结果内容: 包含多个任务的评估结果，如准确率（acc_norm）和准确率标准误差（acc_norm_stderr）等。

数据集详细结果

结果示例

python { "all": { "acc_norm": 0.5087623287199199, "acc_norm_stderr": 0.03806274524028095, "acc": 0.7061548643282595, "acc_stderr": 0.0117225139109852 }, ... }

结果分布

• 任务多样性: 结果涵盖多个社区和任务，如"community|acva:Algeria|0"至"community|arabic_mmlu:professional_law|0"等。
• 性能指标: 每个任务的结果包括准确率及其标准误差。