llama-duo/gemma2b-summarize-locallm-response

---
dataset_info:
features:
- name: instructions
dtype: string
- name: target_responses
dtype: string
- name: candidate_responses
dtype: string
- name: model_id
dtype: string
- name: model_sha
dtype: string
splits:
- name: gemma2b_summarize_gpt4o_1k
num_bytes: 327118
num_examples: 100
- name: gemma2b_summarize_gpt4o_2k
num_bytes: 296401
num_examples: 100
- name: gemma2b_summarize_gpt4o_4k
num_bytes: 236103
num_examples: 100
- name: gemma2b_summarize_gpt4o_8k
num_bytes: 235096
num_examples: 100
- name: gemma2b_summarize_gpt4o_16k
num_bytes: 237329
num_examples: 100
- name: gemma2b_summarize_gpt4o_32k
num_bytes: 237411
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_1k
num_bytes: 332616
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_2k
num_bytes: 261911
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_8k
num_bytes: 253989
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_16k
num_bytes: 255342
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_32k
num_bytes: 253926
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_64k
num_bytes: 253800
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_1k
num_bytes: 339187
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_2k
num_bytes: 359168
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_4k
num_bytes: 243504
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_8k
num_bytes: 233872
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_16k
num_bytes: 239158
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_32k
num_bytes: 243698
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_64k
num_bytes: 244989
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_128k
num_bytes: 246330
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_256k
num_bytes: 250911
num_examples: 100
- name: gemma2b_summarize_gpt4o_128k
num_bytes: 240706
num_examples: 100
- name: gemma2b_summarize_gpt4o_256k
num_bytes: 247107
num_examples: 100
- name: gemma2b_summarize_gpt4o_64k
num_bytes: 241901
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_128k
num_bytes: 260999
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_256k
num_bytes: 264936
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_4k
num_bytes: 250340
num_examples: 100
- name: gemma2b_summarize_gpt4o_32k_r16
num_bytes: 236381
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_32k_r16
num_bytes: 242746
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_32k_r16
num_bytes: 253822
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_64k_r16
num_bytes: 244935
num_examples: 100
- name: gemma2b_summarize_gpt4o_64k_r16
num_bytes: 238850
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_64k_r16
num_bytes: 250392
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_128k_r16
num_bytes: 248723
num_examples: 100
- name: gemma2b_summarize_gpt4o_128k_r16
num_bytes: 238269
num_examples: 100
- name: gemma2b_summarize_gemini1_5flash_256k_r16
num_bytes: 254207
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_128k_r16
num_bytes: 254504
num_examples: 100
- name: gemma2b_summarize_gpt4o_256k_r16
num_bytes: 241094
num_examples: 100
- name: gemma2b_summarize_claude3sonnet_256k_r16
num_bytes: 252394
num_examples: 100
download_size: 3234297
dataset_size: 10044165
configs:
- config_name: default
data_files:
- split: gemma2b_summarize_gpt4o_1k
path: data/gemma2b_summarize_gpt4o_1k-*
- split: gemma2b_summarize_gpt4o_2k
path: data/gemma2b_summarize_gpt4o_2k-*
- split: gemma2b_summarize_gpt4o_4k
path: data/gemma2b_summarize_gpt4o_4k-*
- split: gemma2b_summarize_gpt4o_8k
path: data/gemma2b_summarize_gpt4o_8k-*
- split: gemma2b_summarize_gpt4o_16k
path: data/gemma2b_summarize_gpt4o_16k-*
- split: gemma2b_summarize_gpt4o_32k
path: data/gemma2b_summarize_gpt4o_32k-*
- split: gemma2b_summarize_claude3sonnet_1k
path: data/gemma2b_summarize_claude3sonnet_1k-*
- split: gemma2b_summarize_claude3sonnet_2k
path: data/gemma2b_summarize_claude3sonnet_2k-*
- split: gemma2b_summarize_claude3sonnet_8k
path: data/gemma2b_summarize_claude3sonnet_8k-*
- split: gemma2b_summarize_claude3sonnet_16k
path: data/gemma2b_summarize_claude3sonnet_16k-*
- split: gemma2b_summarize_claude3sonnet_32k
path: data/gemma2b_summarize_claude3sonnet_32k-*
- split: gemma2b_summarize_claude3sonnet_64k
path: data/gemma2b_summarize_claude3sonnet_64k-*
- split: gemma2b_summarize_gemini1_5flash_1k
path: data/gemma2b_summarize_gemini1_5flash_1k-*
- split: gemma2b_summarize_gemini1_5flash_2k
path: data/gemma2b_summarize_gemini1_5flash_2k-*
- split: gemma2b_summarize_gemini1_5flash_4k
path: data/gemma2b_summarize_gemini1_5flash_4k-*
- split: gemma2b_summarize_gemini1_5flash_8k
path: data/gemma2b_summarize_gemini1_5flash_8k-*
- split: gemma2b_summarize_gemini1_5flash_16k
path: data/gemma2b_summarize_gemini1_5flash_16k-*
- split: gemma2b_summarize_gemini1_5flash_32k
path: data/gemma2b_summarize_gemini1_5flash_32k-*
- split: gemma2b_summarize_gemini1_5flash_64k
path: data/gemma2b_summarize_gemini1_5flash_64k-*
- split: gemma2b_summarize_gemini1_5flash_128k
path: data/gemma2b_summarize_gemini1_5flash_128k-*
- split: gemma2b_summarize_gemini1_5flash_256k
path: data/gemma2b_summarize_gemini1_5flash_256k-*
- split: gemma2b_summarize_gpt4o_128k
path: data/gemma2b_summarize_gpt4o_128k-*
- split: gemma2b_summarize_gpt4o_256k
path: data/gemma2b_summarize_gpt4o_256k-*
- split: gemma2b_summarize_gpt4o_64k
path: data/gemma2b_summarize_gpt4o_64k-*
- split: gemma2b_summarize_claude3sonnet_128k
path: data/gemma2b_summarize_claude3sonnet_128k-*
- split: gemma2b_summarize_claude3sonnet_256k
path: data/gemma2b_summarize_claude3sonnet_256k-*
- split: gemma2b_summarize_claude3sonnet_4k
path: data/gemma2b_summarize_claude3sonnet_4k-*
- split: gemma2b_summarize_gpt4o_32k_r16
path: data/gemma2b_summarize_gpt4o_32k_r16-*
- split: gemma2b_summarize_gemini1_5flash_32k_r16
path: data/gemma2b_summarize_gemini1_5flash_32k_r16-*
- split: gemma2b_summarize_claude3sonnet_32k_r16
path: data/gemma2b_summarize_claude3sonnet_32k_r16-*
- split: gemma2b_summarize_gemini1_5flash_64k_r16
path: data/gemma2b_summarize_gemini1_5flash_64k_r16-*
- split: gemma2b_summarize_gpt4o_64k_r16
path: data/gemma2b_summarize_gpt4o_64k_r16-*
- split: gemma2b_summarize_claude3sonnet_64k_r16
path: data/gemma2b_summarize_claude3sonnet_64k_r16-*
- split: gemma2b_summarize_gemini1_5flash_128k_r16
path: data/gemma2b_summarize_gemini1_5flash_128k_r16-*
- split: gemma2b_summarize_gpt4o_128k_r16
path: data/gemma2b_summarize_gpt4o_128k_r16-*
- split: gemma2b_summarize_gemini1_5flash_256k_r16
path: data/gemma2b_summarize_gemini1_5flash_256k_r16-*
- split: gemma2b_summarize_claude3sonnet_128k_r16
path: data/gemma2b_summarize_claude3sonnet_128k_r16-*
- split: gemma2b_summarize_gpt4o_256k_r16
path: data/gemma2b_summarize_gpt4o_256k_r16-*
- split: gemma2b_summarize_claude3sonnet_256k_r16
path: data/gemma2b_summarize_claude3sonnet_256k_r16-*
---

The dataset contains multiple splits, each with 100 examples, focusing on summarization tasks using different models and configurations. The features include instructions, target responses, candidate responses, model ID, and model SHA. The splits vary in size from 1k to 256k, indicating different data volumes. The dataset is structured to evaluate and compare the performance of various models in summarization tasks.

原始信息汇总

数据集概述

数据集特征

• instructions: 数据类型为字符串（string）。
• target_responses: 数据类型为字符串（string）。
• candidate_responses: 数据类型为字符串（string）。
• model_id: 数据类型为字符串（string）。
• model_sha: 数据类型为字符串（string）。

数据集分割

数据集包含多个分割，每个分割具有不同的大小和示例数量。以下是部分分割的详细信息：

• gemma2b_summarize_gpt4o_1k: 大小为327118字节，包含100个示例。
• gemma2b_summarize_gpt4o_2k: 大小为296401字节，包含100个示例。
• gemma2b_summarize_gpt4o_4k: 大小为236103字节，包含100个示例。
• gemma2b_summarize_gpt4o_8k: 大小为235096字节，包含100个示例。
• gemma2b_summarize_gpt4o_16k: 大小为237329字节，包含100个示例。
• gemma2b_summarize_gpt4o_32k: 大小为237411字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_1k: 大小为332616字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_2k: 大小为261911字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_8k: 大小为253989字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_16k: 大小为255342字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_32k: 大小为253926字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_64k: 大小为253800字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_1k: 大小为339187字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_2k: 大小为359168字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_4k: 大小为243504字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_8k: 大小为233872字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_16k: 大小为239158字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_32k: 大小为243698字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_64k: 大小为244989字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_128k: 大小为246330字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_256k: 大小为250911字节，包含100个示例。
• gemma2b_summarize_gpt4o_128k: 大小为240706字节，包含100个示例。
• gemma2b_summarize_gpt4o_256k: 大小为247107字节，包含100个示例。
• gemma2b_summarize_gpt4o_64k: 大小为241901字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_128k: 大小为260999字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_256k: 大小为264936字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_4k: 大小为250340字节，包含100个示例。
• gemma2b_summarize_gpt4o_32k_r16: 大小为236381字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_32k_r16: 大小为242746字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_32k_r16: 大小为253822字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_64k_r16: 大小为244935字节，包含100个示例。
• gemma2b_summarize_gpt4o_64k_r16: 大小为238850字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_64k_r16: 大小为250392字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_128k_r16: 大小为248723字节，包含100个示例。
• gemma2b_summarize_gpt4o_128k_r16: 大小为238269字节，包含100个示例。
• gemma2b_summarize_gemini1_5flash_256k_r16: 大小为254207字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_128k_r16: 大小为254504字节，包含100个示例。
• gemma2b_summarize_gpt4o_256k_r16: 大小为241094字节，包含100个示例。
• gemma2b_summarize_claude3sonnet_256k_r16: 大小为252394字节，包含100个示例。

数据集大小

• 下载大小: 3234297字节。
• 数据集总大小: 10044165字节。

配置信息

• 默认配置包含多个数据文件，每个文件对应不同的分割，路径格式为data/分割名称-*。