five

mychen76/stack-exchange-paired-500k

收藏
Hugging Face2023-09-01 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/mychen76/stack-exchange-paired-500k
下载链接
链接失效反馈
官方服务:
资源简介:
StackExchange Paired 500K数据集是lvwerra/stack-exchange-paired的一个子集,而后者又是HuggingFaceH4/stack-exchange-preferences的加工版本。该数据集通过将HTML解析为Markdown格式,创建评分较高的响应对(response_j, response_k),每个问题最多采样10对,并对数据集进行全局洗牌。该数据集设计用于偏好学习。
提供机构:
mychen76
原始信息汇总

数据集概述

数据集名称

StackExchange Paired 500K

数据集来源

该数据集是 lvwerra/stack-exchange-paired 的一个子集,后者是 HuggingFaceH4/stack-exchange-preferences 的处理版本。

数据处理步骤

  1. 使用 markdownify 将 HTML 解析为 Markdown。
  2. 创建配对(response_j, response_k),其中 j 被评级为比 k 更好。
  3. 每个问题最多采样 10 对。
  4. 全局打乱数据集。

数据集用途

该数据集设计用于偏好学习。

许可证

MIT 许可证

5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作