OALL/details_google__recurrentgemma-2b

该数据集是在评估模型google/recurrentgemma-2b时自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行的结果可以在特定的配置中找到，分割名称使用运行的时间戳命名。train分割始终指向最新的结果。此外，还有一个名为results的配置存储了所有运行的聚合结果。

原始信息汇总

数据集概述

数据集名称

Evaluation run of google/recurrentgemma-2b

数据集创建

该数据集是自动创建的，用于评估模型google/recurrentgemma-2b的运行结果。

数据集结构

数据集包含136个配置，每个配置对应一个评估任务。每个配置中的数据分为不同的分割，其中"train"分割指向最新的结果。此外，还有一个名为"results"的配置，存储了所有运行的聚合结果。

数据集加载示例

python from datasets import load_dataset data = load_dataset("OALL/details_google__recurrentgemma-2b", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

数据集包含了最新的运行结果，具体结果可以在相应的配置中找到。每个任务的结果都存储在"results"配置中，而每个评估的最新结果则存储在相应的"latest"分割中。

数据集内容

数据集详细记录了各个任务的评估结果，包括但不限于准确率（acc_norm）和准确率的标准误差（acc_norm_stderr）等指标。每个任务的结果都详细列出，以便于分析和比较。