cviswanath/flan-v2-processed
收藏Hugging Face2024-04-01 更新2024-06-11 收录
下载链接：
https://hf-mirror.com/datasets/cviswanath/flan-v2-processed
下载链接
链接失效反馈官方服务：
资源简介：
数据集来源于`flan-v2`的GitHub仓库，具体是从coT文件夹中提取的所有训练数据。数据处理步骤包括：1. 移除响应少于100个token的条目；2. 移除余弦相似度大于0.95的重复数据。
数据集来源于`flan-v2`的GitHub仓库，具体是从coT文件夹中提取的所有训练数据。数据处理步骤包括：1. 移除响应少于100个token的条目；2. 移除余弦相似度大于0.95的重复数据。
提供机构：
cviswanath
原始信息汇总
数据集概述
数据来源
- 数据来源于
flan-v2的 GitHub 仓库，具体链接为 GitHub。
数据处理步骤
- 筛选标准：移除了响应长度少于100个token的条目。
- 去重处理：移除了余弦相似度大于0.95的重复数据。
许可证
- 本数据集遵循 Apache-2.0 许可证。
