locuslab/TOFU

TOFU数据集是一个用于评估大型语言模型在虚构任务上遗忘性能的基准数据集。该数据集包含基于GPT-4模型生成的200位虚构作者的自传问答对。任务的目标是在不同比例的遗忘集上对微调模型进行遗忘。数据集提供了多种配置，包括不同比例的遗忘集和保留集，适用于各种大型语言模型。

原始信息汇总

TOFU数据集概述

数据集目的

TOFU数据集用于评估大型语言模型在现实任务中的遗忘性能。

数据集内容

该数据集包含基于200位不同作者自传的问答对。这些作者及其自传均为GPT-4模型完全虚构生成。

任务目标

任务目标是在不同比例的遗忘集上对微调模型进行遗忘。