open-llm-leaderboard-old/details_lole25__phi-2-sft-lora-ultrachat
收藏Hugging Face2024-03-13 更新2024-06-22 收录
下载链接：
https://hf-mirror.com/datasets/open-llm-leaderboard-old/details_lole25__phi-2-sft-lora-ultrachat
下载链接
链接失效反馈官方服务：
资源简介：
该数据集是在Open LLM Leaderboard上对模型lole25/phi-2-sft-lora-ultrachat进行评估时自动创建的。数据集由63个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行可以在每个配置中找到特定的分割，分割名称使用运行的时间戳。train分割始终指向最新的结果。此外，还有一个名为results的配置存储了所有运行的聚合结果，并用于计算和显示在Open LLM Leaderboard上的聚合指标。
该数据集是在Open LLM Leaderboard上对模型lole25/phi-2-sft-lora-ultrachat进行评估时自动创建的。数据集由63个配置组成，每个配置对应一个评估任务。数据集是从1次运行中创建的，每次运行可以在每个配置中找到特定的分割，分割名称使用运行的时间戳。train分割始终指向最新的结果。此外，还有一个名为results的配置存储了所有运行的聚合结果，并用于计算和显示在Open LLM Leaderboard上的聚合指标。
提供机构：
open-llm-leaderboard-old
原始信息汇总
数据集概述
数据集简介
该数据集是在评估模型 lole25/phi-2-sft-lora-ultrachat 在 Open LLM Leaderboard 上的运行过程中自动创建的。数据集包含 63 个配置，每个配置对应一个评估任务。
数据集结构
- 配置数量：63 个配置
- 数据来源：1 次运行
- 数据分割：每个配置包含特定分割，分割名称使用运行的时间戳。"train" 分割指向最新结果。
- 额外配置："results" 配置存储所有运行的聚合结果，用于计算和显示聚合指标在 Open LLM Leaderboard 上。
数据加载示例
python from datasets import load_dataset data = load_dataset("open-llm-leaderboard/details_lole25__phi-2-sft-lora-ultrachat", "harness_winogrande_5", split="train")
最新结果
最新结果来自 2024-03-13T01:43:41.244095 运行，包含多个任务的准确率和标准误差。例如：
- 任务：
harness|arc:challenge|25- 准确率：0.5784982935153583
- 标准误差：0.014430197069326021
- 任务：
harness|hellaswag|10- 准确率：0.5587532364070902
- 标准误差：0.0049552127878323814
配置详情
-
配置名称：
harness_arc_challenge_25- 数据文件：
- 分割：2024_03_13T01_43_41.244095
- 路径：
**/details_harness|arc:challenge|25_2024-03-13T01-43-41.244095.parquet
- 路径：
- 分割：latest
- 路径：
**/details_harness|arc:challenge|25_2024-03-13T01-43-41.244095.parquet
- 路径：
- 分割：2024_03_13T01_43_41.244095
- 数据文件：
-
配置名称：
harness_gsm8k_5- 数据文件：
- 分割：2024_03_13T01_43_41.244095
- 路径：
**/details_harness|gsm8k|5_2024-03-13T01-43-41.244095.parquet
- 路径：
- 分割：latest
- 路径：
**/details_harness|gsm8k|5_2024-03-13T01-43-41.244095.parquet
- 路径：
- 分割：2024_03_13T01_43_41.244095
- 数据文件：
-
配置名称：
harness_hellaswag_10- 数据文件：
- 分割：2024_03_13T01_43_41.244095
- 路径：
**/details_harness|hellaswag|10_2024-03-13T01-43-41.244095.parquet
- 路径：
- 分割：latest
- 路径：
**/details_harness|hellaswag|10_2024-03-13T01-43-41.244095.parquet
- 路径：
- 分割：2024_03_13T01_43_41.244095
- 数据文件：
-
配置名称：
harness_hendrycksTest_5- 数据文件：
- 分割：2024_03_13T01_43_41.244095
- 路径：多个文件路径，例如：
**/details_harness|hendrycksTest-abstract_algebra|5_2024-03-13T01-43-41.244095.parquet**/details_harness|hendrycksTest-anatomy|5_2024-03-13T01-43-41.244095.parquet- 等等。
- 路径：多个文件路径，例如：
- 分割：2024_03_13T01_43_41.244095
- 数据文件：
