OALL/details_core42__jais-30b-v3

该数据集是在模型core42/jais-30b-v3的评估运行过程中自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集由7次运行创建，每次运行的结果作为特定配置中的一个分割，分割名称使用运行的时间戳。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置存储了所有运行的聚合结果。

原始信息汇总

数据集概述

数据集名称

• pretty_name: Evaluation run of core42/jais-30b-v3

数据集描述

• dataset_summary: 该数据集是在评估模型core42/jais-30b-v3的过程中自动创建的。数据集包含136个配置，每个配置对应一个评估任务。数据集由7次运行创建，每次运行在每个配置中作为一个特定的分割存在，分割名称使用运行的时间戳命名。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置，存储了所有运行的聚合结果。

数据集结构

• 配置数量: 136个
• 运行次数: 7次
• 分割方式: 每次运行对应一个特定分割，分割名称基于时间戳
• 特殊配置: "results"配置，存储聚合结果

加载数据示例

python from datasets import load_dataset data = load_dataset("OALL/details_core42__jais-30b-v3", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 结果来源: 来自2024-05-21T14:42:30.157115的运行
• 结果存储位置: 链接
• 结果内容: 包含多个任务的评估指标，如准确率（acc_norm, acc_norm_stderr, acc等）

数据集详细内容

• 评估指标: 包括但不限于准确率、准确率标准误差等
• 任务范围: 涵盖多个社区和主题，如历史、文化、技术等
• 数据集用途: 用于评估模型在不同任务上的性能表现