OALL/details_jondurbin__bagel-dpo-34b-v0.2

该数据集是在模型 jondurbin/bagel-dpo-34b-v0.2 的评估运行期间自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从一次或多次运行中生成的，每次运行在每个配置中表示为特定的分割，train 分割始终指向最新的结果。此外，还有一个 results 配置存储了运行的所有聚合结果。

原始信息汇总

数据集概述

数据集名称

• Evaluation run of jondurbin/bagel-dpo-34b-v0.2

数据集创建

• 创建原因：自动创建于模型jondurbin/bagel-dpo-34b-v0.2的评估运行期间。
• 数据组成：包含136个配置，每个配置对应一个评估任务。
• 创建过程：数据集由1次运行创建，每次运行作为一个特定的分割，分割名称使用运行的时间戳。

数据集结构

• 分割说明：每个配置中包含不同的分割，其中"train"分割指向最新的结果。
• 额外配置：存在一个名为"results"的配置，存储所有运行的聚合结果。

数据加载示例

python from datasets import load_dataset data = load_dataset("OALL/details_jondurbin__bagel-dpo-34b-v0.2", "lighteval_xstory_cloze_ar_0", split="train")

最新结果

• 结果来源：latest results from run 2024-05-18T14:23:25.089336
• 结果内容：包括多个任务的准确率（acc_norm）和标准误差（acc_norm_stderr）等指标。