klcsp/closedqa-eval

---
dataset_info:
features:
- name: instructions
dtype: string
- name: target_responses
dtype: string
- name: candidate_responses
dtype: string
- name: model_id
dtype: string
- name: model_sha
dtype: string
- name: eval_prompts
dtype: string
- name: similarity_scores
dtype: float64
- name: precision_scores
dtype: float64
- name: evaluators
dtype: string
- name: dates
dtype: string
splits:
- name: gemma7b_k
num_bytes: 327778
num_examples: 60
- name: llama3_1_8b_k2
num_bytes: 301072
num_examples: 60
- name: mistral7b_k2
num_bytes: 301004
num_examples: 60
- name: mistral7b_lora2
num_bytes: 301462
num_examples: 60
- name: llama3_1_8b_lora2
num_bytes: 302714
num_examples: 60
- name: gemma7b_lora2
num_bytes: 324796
num_examples: 60
- name: gemma7b_fft2
num_bytes: 305550
num_examples: 60
- name: llama3_1_8b_fft2
num_bytes: 318472
num_examples: 60
- name: mistral7b_fft2
num_bytes: 303294
num_examples: 60
download_size: 713304
dataset_size: 2786142
configs:
- config_name: default
data_files:
- split: gemma7b_k
path: data/gemma7b_k-*
- split: llama3_1_8b_k2
path: data/llama3_1_8b_k2-*
- split: mistral7b_k2
path: data/mistral7b_k2-*
- split: mistral7b_lora2
path: data/mistral7b_lora2-*
- split: llama3_1_8b_lora2
path: data/llama3_1_8b_lora2-*
- split: gemma7b_lora2
path: data/gemma7b_lora2-*
- split: gemma7b_fft2
path: data/gemma7b_fft2-*
- split: llama3_1_8b_fft2
path: data/llama3_1_8b_fft2-*
- split: mistral7b_fft2
path: data/mistral7b_fft2-*
---

数据集信息：
特征字段：
- 名称：指令（instructions），数据类型：字符串
- 名称：目标响应（target_responses），数据类型：字符串
- 名称：候选响应（candidate_responses），数据类型：字符串
- 名称：模型ID（model_id），数据类型：字符串
- 名称：模型哈希值（model_sha），数据类型：字符串
- 名称：评估提示词（eval_prompts），数据类型：字符串
- 名称：相似度得分（similarity_scores），数据类型：64位浮点数（float64）
- 名称：精确率得分（precision_scores），数据类型：64位浮点数（float64）
- 名称：评估者（evaluators），数据类型：字符串
- 名称：日期（dates），数据类型：字符串
数据集划分：
- 划分名称：gemma7b_k，字节数：327778，样本量：60
- 划分名称：llama3_1_8b_k2，字节数：301072，样本量：60
- 划分名称：mistral7b_k2，字节数：301004，样本量：60
- 划分名称：mistral7b_lora2，字节数：301462，样本量：60
- 划分名称：llama3_1_8b_lora2，字节数：302714，样本量：60
- 划分名称：gemma7b_lora2，字节数：324796，样本量：60
- 划分名称：gemma7b_fft2，字节数：305550，样本量：60
- 划分名称：llama3_1_8b_fft2，字节数：318472，样本量：60
- 划分名称：mistral7b_fft2，字节数：303294，样本量：60
下载总大小：713304字节，数据集总占用大小：2786142字节
配置项：
- 配置名称：默认（default），数据文件映射：
- 对应划分：gemma7b_k，文件路径：data/gemma7b_k-*
- 对应划分：llama3_1_8b_k2，文件路径：data/llama3_1_8b_k2-*
- 对应划分：mistral7b_k2，文件路径：data/mistral7b_k2-*
- 对应划分：mistral7b_lora2，文件路径：data/mistral7b_lora2-*
- 对应划分：llama3_1_8b_lora2，文件路径：data/llama3_1_8b_lora2-*
- 对应划分：gemma7b_lora2，文件路径：data/gemma7b_lora2-*
- 对应划分：gemma7b_fft2，文件路径：data/gemma7b_fft2-*
- 对应划分：llama3_1_8b_fft2，文件路径：data/llama3_1_8b_fft2-*
- 对应划分：mistral7b_fft2，文件路径：data/mistral7b_fft2-*