anon-submission/LOFT-ICL

---
dataset_info:
- config_name: date_understanding
features:
- name: system_prompt
dtype: string
- name: question_template
dtype: string
- name: question
dtype: string
- name: context_template
dtype: string
- name: contexts
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: contexts_1
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: answers
sequence: string
- name: answer_prefix
dtype: string
- name: max_new_tokens
dtype: int64
splits:
- name: test
num_bytes: 6070980
num_examples: 90
download_size: 36383
dataset_size: 6070980
- config_name: salient_translation_error_detection
features:
- name: system_prompt
dtype: string
- name: question_template
dtype: string
- name: question
dtype: string
- name: context_template
dtype: string
- name: contexts
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: contexts_1
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: answers
sequence: string
- name: answer_prefix
dtype: string
- name: max_new_tokens
dtype: int64
splits:
- name: test
num_bytes: 21055974
num_examples: 90
download_size: 75368
dataset_size: 21055974
- config_name: tracking_shuffled_objects_seven_objects
features:
- name: system_prompt
dtype: string
- name: question_template
dtype: string
- name: question
dtype: string
- name: context_template
dtype: string
- name: contexts
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: contexts_1
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: answers
sequence: string
- name: answer_prefix
dtype: string
- name: max_new_tokens
dtype: int64
splits:
- name: test
num_bytes: 18461775
num_examples: 90
download_size: 73048
dataset_size: 18461775
- config_name: web_of_lies
features:
- name: system_prompt
dtype: string
- name: question_template
dtype: string
- name: question
dtype: string
- name: context_template
dtype: string
- name: contexts
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: contexts_1
list:
- name: isgold
dtype: bool
- name: text
dtype: string
- name: answers
sequence: string
- name: answer_prefix
dtype: string
- name: max_new_tokens
dtype: int64
splits:
- name: test
num_bytes: 5276254
num_examples: 90
download_size: 29588
dataset_size: 5276254
configs:
- config_name: date_understanding
data_files:
- split: test
path: date_understanding/test-*
- config_name: salient_translation_error_detection
data_files:
- split: test
path: salient_translation_error_detection/test-*
- config_name: tracking_shuffled_objects_seven_objects
data_files:
- split: test
path: tracking_shuffled_objects_seven_objects/test-*
- config_name: web_of_lies
data_files:
- split: test
path: web_of_lies/test-*
---

数据集信息：
- 配置名称：日期理解（date_understanding）
特征字段：
- 字段名：系统提示词（system_prompt），数据类型：字符串型
- 字段名：问题模板（question_template），数据类型：字符串型
- 字段名：问题（question），数据类型：字符串型
- 字段名：上下文模板（context_template），数据类型：字符串型
- 字段名：上下文（contexts），数据类型：列表，列表元素包含：
- 字段名：是否为金标准样本（isgold），数据类型：布尔型
- 字段名：文本内容（text），数据类型：字符串型
- 字段名：上下文1（contexts_1），数据类型：列表，列表元素与上述一致
- 字段名：答案集（answers），数据类型：字符串序列
- 字段名：答案前缀（answer_prefix），数据类型：字符串型
- 字段名：最大生成Token数（max_new_tokens），数据类型：64位整数
数据集划分：
- 划分名称：测试集（test），字节数：6070980，样本数量：90
下载大小：36383，数据集大小：6070980
- 配置名称：显著翻译错误检测（salient_translation_error_detection）
特征字段：
- 字段名：系统提示词（system_prompt），数据类型：字符串型
- 字段名：问题模板（question_template），数据类型：字符串型
- 字段名：问题（question），数据类型：字符串型
- 字段名：上下文模板（context_template），数据类型：字符串型
- 字段名：上下文（contexts），数据类型：列表，列表元素包含：
- 字段名：是否为金标准样本（isgold），数据类型：布尔型
- 字段名：文本内容（text），数据类型：字符串型
- 字段名：上下文1（contexts_1），数据类型：列表，列表元素与上述一致
- 字段名：答案集（answers），数据类型：字符串序列
- 字段名：答案前缀（answer_prefix），数据类型：字符串型
- 字段名：最大生成Token数（max_new_tokens），数据类型：64位整数
数据集划分：
- 划分名称：测试集（test），字节数：21055974，样本数量：90
下载大小：75368，数据集大小：21055974
- 配置名称：七物体打乱跟踪（tracking_shuffled_objects_seven_objects）
特征字段：
- 字段名：系统提示词（system_prompt），数据类型：字符串型
- 字段名：问题模板（question_template），数据类型：字符串型
- 字段名：问题（question），数据类型：字符串型
- 字段名：上下文模板（context_template），数据类型：字符串型
- 字段名：上下文（contexts），数据类型：列表，列表元素包含：
- 字段名：是否为金标准样本（isgold），数据类型：布尔型
- 字段名：文本内容（text），数据类型：字符串型
- 字段名：上下文1（contexts_1），数据类型：列表，列表元素与上述一致
- 字段名：答案集（answers），数据类型：字符串序列
- 字段名：答案前缀（answer_prefix），数据类型：字符串型
- 字段名：最大生成Token数（max_new_tokens），数据类型：64位整数
数据集划分：
- 划分名称：测试集（test），字节数：18461775，样本数量：90
下载大小：73048，数据集大小：18461775
- 配置名称：谎言之网（web_of_lies）
特征字段：
- 字段名：系统提示词（system_prompt），数据类型：字符串型
- 字段名：问题模板（question_template），数据类型：字符串型
- 字段名：问题（question），数据类型：字符串型
- 字段名：上下文模板（context_template），数据类型：字符串型
- 字段名：上下文（contexts），数据类型：列表，列表元素包含：
- 字段名：是否为金标准样本（isgold），数据类型：布尔型
- 字段名：文本内容（text），数据类型：字符串型
- 字段名：上下文1（contexts_1），数据类型：列表，列表元素与上述一致
- 字段名：答案集（answers），数据类型：字符串序列
- 字段名：答案前缀（answer_prefix），数据类型：字符串型
- 字段名：最大生成Token数（max_new_tokens），数据类型：64位整数
数据集划分：
- 划分名称：测试集（test），字节数：5276254，样本数量：90
下载大小：29588，数据集大小：5276254
配置项：
- 配置名称：日期理解（date_understanding），数据文件：
- 划分：测试集（test），路径：date_understanding/test-*
- 配置名称：显著翻译错误检测（salient_translation_error_detection），数据文件：
- 划分：测试集（test），路径：salient_translation_error_detection/test-*
- 配置名称：七物体打乱跟踪（tracking_shuffled_objects_seven_objects），数据文件：
- 划分：测试集（test），路径：tracking_shuffled_objects_seven_objects/test-*
- 配置名称：谎言之网（web_of_lies），数据文件：
- 划分：测试集（test），路径：web_of_lies/test-*