MultiPref

该数据集包含了不同大型语言模型输出之间的成对比较，并附有多位标注者的评分。此外，数据集还展现了标注者之间的分歧。该任务的目的是基于多样化的人类偏好来评估对齐模型。