OALL/details_abacusai__Smaug-72B-v0.1
收藏Hugging Face2024-06-04 更新2024-06-12 收录
下载链接：
https://hf-mirror.com/datasets/OALL/details_abacusai__Smaug-72B-v0.1
下载链接
链接失效反馈官方服务：
资源简介：
该数据集是在评估模型abacusai/Smaug-72B-v0.1时自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行都可以在特定配置中找到，分割名称使用运行的时间戳。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置存储了所有运行的聚合结果。
该数据集是在评估模型abacusai/Smaug-72B-v0.1时自动创建的。数据集由136个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行都可以在特定配置中找到，分割名称使用运行的时间戳。"train"分割始终指向最新的结果。此外，还有一个名为"results"的配置存储了所有运行的聚合结果。
提供机构：
OALL
原始信息汇总
数据集概述
数据集名称
- Evaluation run of abacusai/Smaug-72B-v0.1
数据集描述
- 创建目的：自动创建于模型abacusai/Smaug-72B-v0.1的评估运行期间。
- 配置数量：包含136个配置，每个配置对应一个评估任务。
- 数据来源：数据集由1次运行创建，每次运行在每个配置中作为一个特定的分割存在，分割名称使用运行的时间戳。
- 额外配置："results"配置存储了所有运行的聚合结果。
数据集使用示例
python from datasets import load_dataset data = load_dataset("OALL/details_abacusai__Smaug-72B-v0.1", "lighteval_xstory_cloze_ar_0", split="train")
最新结果
- 结果来源：latest results from run 2024-06-04T03:20:07.268985
- 结果内容：包括多个任务的准确率（acc_norm）和标准误差（acc_norm_stderr），如社区任务、阿拉伯相关任务、教育、文化、历史等多个领域的评估结果。
