open-llm-leaderboard-old/details_llm-jp__llm-jp-13b-instruct-full-jaster-dolly-oasst-v1.0
收藏Hugging Face2023-12-02 更新2024-06-22 收录
下载链接：
https://hf-mirror.com/datasets/open-llm-leaderboard-old/details_llm-jp__llm-jp-13b-instruct-full-jaster-dolly-oasst-v1.0
下载链接
链接失效反馈官方服务：
资源简介：
该数据集是在评估模型llm-jp/llm-jp-13b-instruct-full-jaster-dolly-oasst-v1.0时自动生成的，主要用于Open LLM Leaderboard上的评估任务。数据集包含一个配置，每个配置对应一个评估任务。数据集由一次运行生成，每次运行可以在每个配置中找到特定的分割，分割名称使用运行的时间戳。此外，数据集还包含一个名为“results”的配置，用于存储所有运行的聚合结果，并在Open LLM Leaderboard上显示聚合指标。
This dataset was automatically generated during the evaluation of the model llm-jp/llm-jp-13b-instruct-full-jaster-dolly-oasst-v1.0, and is primarily intended for evaluation tasks on the Open LLM Leaderboard. The dataset includes a single configuration, where each such configuration corresponds to an evaluation task. Generated from a single run, specific splits can be found for each configuration, with the split names using the timestamp of the run. Additionally, the dataset contains a configuration named "results" that stores aggregated results from all runs and displays aggregated metrics on the Open LLM Leaderboard.
提供机构：
open-llm-leaderboard-old
原始信息汇总
数据集概述
数据集描述
-
数据集摘要： 该数据集是在模型 llm-jp/llm-jp-13b-instruct-full-jaster-dolly-oasst-v1.0 在 Open LLM Leaderboard 上的评估运行期间自动创建的。数据集由1个配置组成，每个配置对应一个评估任务。数据集从1次运行中创建，每次运行可以在每个配置中作为一个特定的分割找到，分割名称使用运行的时间戳。"train" 分割始终指向最新的结果。
-
附加配置： 一个额外的配置 "results" 存储了所有运行的聚合结果，并用于计算和显示 Open LLM Leaderboard 上的聚合指标。
最新结果
以下是来自运行 2023-12-02T12:37:10.361445 的最新结果：
python { "all": { "acc": 0.0, "acc_stderr": 0.0 }, "harness|gsm8k|5": { "acc": 0.0, "acc_stderr": 0.0 } }
数据集结构
配置
-
harness_gsm8k_5：
- 分割：2023_12_02T12_37_10.361445
- 路径：
**/details_harness|gsm8k|5_2023-12-02T12-37-10.361445.parquet - 分割：latest
- 路径：
**/details_harness|gsm8k|5_2023-12-02T12-37-10.361445.parquet
-
results：
- 分割：2023_12_02T12_37_10.361445
- 路径：
results_2023-12-02T12-37-10.361445.parquet - 分割：latest
- 路径：
results_2023-12-02T12-37-10.361445.parquet
