UCL-DARK/alpaca-farm-id-test

AlpacaFarm In Distribution Test Dataset是一个用于研究RLHF（人类反馈强化学习）对大型语言模型（LLM）泛化和多样性影响的数据集。该数据集包含四个特征：dataset、instruction、output和generator，均为字符串类型。数据集分为一个训练集，包含1033个样本，大小为445180字节。数据集的总下载大小为246025字节，总大小为445180字节。数据集适用于文本生成任务，语言为英语，许可证为MIT。数据集的名称为AlpacaFarm In Distribution Test Dataset，属于小于1K的规模类别。数据是从原始alpaca数据集的同一分布中重新生成的，以确保模型没有记忆训练数据集中的示例。

---
数据集信息：
特征项：
- 字段名：dataset，数据类型：字符串
- 字段名：instruction，数据类型：字符串
- 字段名：output，数据类型：字符串
- 字段名：generator，数据类型：字符串
数据集划分：
- 划分名称：train（训练集），占用字节数：445180，样本数量：1033
下载大小：246025
数据集总大小：445180
许可证：MIT许可证
任务类别：
- 文本生成
语言：
- 英语
展示名称：AlpacaFarm 分布内测试数据集
样本规模分类：
- 样本数少于1000（n<1K）
---
# AlpacaFarm 分布内测试数据集

本数据集为支撑论文《人类反馈强化学习（Reinforcement Learning from Human Feedback，RLHF）对大语言模型（Large Language Model，LLM）泛化性与多样性的影响》（原标题：*Understanding the Effects of RLHF on LLM Generalisation and Diversity*，https://arxiv.org/abs/2310.06452）实验结果的分布内测试数据。

有关本数据集的生成方式，请参阅链接：https://github.com/RobertKirk/stanford_alpaca。

本数据集与原始alpaca（Alpaca）数据集（https://huggingface.co/datasets/tatsu-lab/alpaca）同分布，但为避免模型记忆训练集中的样本而重新生成。

原始信息汇总

数据集概述

基本信息

• 名称: AlpacaFarm In Distribution Test Dataset
• 语言: 英语 (en)
• 许可证: MIT
• 任务类别: 文本生成 (text-generation)
• 大小类别: 小于1K (n<1K)

数据集特征

• dataset: 数据类型为字符串 (string)
• instruction: 数据类型为字符串 (string)
• output: 数据类型为字符串 (string)
• generator: 数据类型为字符串 (string)

数据集划分

• 训练集 (train):
  • 示例数量: 1033
  • 数据大小: 445180字节

数据集大小

• 下载大小: 246025字节
• 数据集总大小: 445180字节