OALL/details_haoranxu__ALMA-13B-R
收藏Hugging Face2024-05-20 更新2024-06-12 收录
下载链接:
https://hf-mirror.com/datasets/OALL/details_haoranxu__ALMA-13B-R
下载链接
链接失效反馈官方服务:
资源简介:
该数据集是在模型haoranxu/ALMA-13B-R的评估运行期间自动创建的。它由136个配置组成,每个配置对应一个被评估的任务。数据集是从1次运行中生成的,每次运行在每个配置中表示为特定的分割,分割名称使用运行的时间戳。train分割始终指向最新的结果。此外,一个名为results的配置存储了所有运行的聚合结果。README还提供了如何使用datasets库加载数据集的示例,并包含了特定运行的最新结果。
该数据集是在模型haoranxu/ALMA-13B-R的评估运行期间自动创建的。它由136个配置组成,每个配置对应一个被评估的任务。数据集是从1次运行中生成的,每次运行在每个配置中表示为特定的分割,分割名称使用运行的时间戳。train分割始终指向最新的结果。此外,一个名为results的配置存储了所有运行的聚合结果。README还提供了如何使用datasets库加载数据集的示例,并包含了特定运行的最新结果。
提供机构:
OALL
原始信息汇总
数据集概述
数据集名称
- Evaluation run of haoranxu/ALMA-13B-R
数据集描述
- 该数据集是在评估模型haoranxu/ALMA-13B-R的过程中自动创建的。
- 数据集由136个配置组成,每个配置对应一个评估任务。
- 数据集是从1次运行中创建的,每次运行都可以在每个配置中找到,作为特定的分割,分割名称使用运行的时间戳。
- “train”分割始终指向最新的结果。
- 额外的配置“results”存储了运行中所有聚合的结果。
数据集加载示例
python from datasets import load_dataset data = load_dataset("OALL/details_haoranxu__ALMA-13B-R", "lighteval_xstory_cloze_ar_0", split="train")
最新结果
- 最新结果来自run 2024-05-20T20:23:55.647533。
- 结果可能包括其他任务的数据,这些数据在连续评估中可能没有覆盖相同的任务。
结果详细信息
- 结果详细信息包括多个社区和任务的准确率(acc_norm)和标准误差(acc_norm_stderr)。
- 每个社区和任务的结果都是独立的,详细记录了各自的性能指标。



