ServiceNow/repliqa_inference_tests_2

---
dataset_info:
features:
- name: topic
dtype: string
- name: context
dtype: string
- name: question
dtype: string
- name: answer
dtype: string
- name: predicted_answer
dtype: string
- name: retrieved_topic
dtype: string
splits:
- name: mistral_large
num_bytes: 17506
num_examples: 22
- name: llama_3_70b_instruct
num_bytes: 16513
num_examples: 22
- name: gemini_pro
num_bytes: 17108
num_examples: 22
- name: gpt_4o
num_bytes: 16327
num_examples: 22
download_size: 72038
dataset_size: 67454
configs:
- config_name: default
data_files:
- split: mistral_large
path: data/mistral_large-*
- split: llama_3_70b_instruct
path: data/llama_3_70b_instruct-*
- split: gemini_pro
path: data/gemini_pro-*
- split: gpt_4o
path: data/gpt_4o-*
---

数据集信息：
特征字段：
- 字段名：主题（topic），数据类型：字符串
- 字段名：上下文（context），数据类型：字符串
- 字段名：问题（question），数据类型：字符串
- 字段名：标准答案（answer），数据类型：字符串
- 字段名：模型预测答案（predicted_answer），数据类型：字符串
- 字段名：检索主题（retrieved_topic），数据类型：字符串
数据集划分：
- 划分名称：mistral_large（Mistral Large），字节大小：17506，样本数量：22
- 划分名称：llama_3_70b_instruct（Llama 3 70B 指令版），字节大小：16513，样本数量：22
- 划分名称：gemini_pro（Gemini Pro），字节大小：17108，样本数量：22
- 划分名称：gpt_4o（GPT-4o），字节大小：16327，样本数量：22
下载总大小：72038
数据集总大小：67454
数据集配置：
- 配置名称：default（默认配置），数据文件：
- 划分：mistral_large（Mistral Large），路径：data/mistral_large-*
- 划分：llama_3_70b_instruct（Llama 3 70B 指令版），路径：data/llama_3_70b_instruct-*
- 划分：gemini_pro（Gemini Pro），路径：data/gemini_pro-*
- 划分：gpt_4o（GPT-4o），路径：data/gpt_4o-*

原始信息汇总

数据集概述

数据集特征

• topic: 数据类型为字符串
• context: 数据类型为字符串
• question: 数据类型为字符串
• answer: 数据类型为字符串
• predicted_answer: 数据类型为字符串
• retrieved_topic: 数据类型为字符串

数据集分割

• mistral_large: 数据大小为17506字节，示例数量为22
• llama_3_70b_instruct: 数据大小为16513字节，示例数量为22
• gemini_pro: 数据大小为17108字节，示例数量为22
• gpt_4o: 数据大小为16327字节，示例数量为22

数据集大小

• 下载大小: 72038字节
• 数据集大小: 67454字节

配置文件

• config_name: default
• data_files:
  • split: mistral_large, 路径: data/mistral_large-*
  • split: llama_3_70b_instruct, 路径: data/llama_3_70b_instruct-*
  • split: gemini_pro, 路径: data/gemini_pro-*
  • split: gpt_4o, 路径: data/gpt_4o-*