shi3z/ja_conv_wikipedia_llama2pro8b_3k
收藏Hugging Face2024-01-09 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/shi3z/ja_conv_wikipedia_llama2pro8b_3k
下载链接
链接失效反馈官方服务：
资源简介：
该数据集基于日语版本的Wikipedia数据集，使用llama2Pro8B模型转换为多轮对话格式。生成了10,000个对话，但经过筛选后只有约3,000个对话可用。数据集使用llama2许可证，可以用于商业服务。生成过程在A100 80GBx7机器上进行，耗时24小时，并自动筛选。
该数据集基于日语版本的Wikipedia数据集，使用llama2Pro8B模型转换为多轮对话格式。生成了10,000个对话，但经过筛选后只有约3,000个对话可用。数据集使用llama2许可证，可以用于商业服务。生成过程在A100 80GBx7机器上进行，耗时24小时，并自动筛选。
提供机构：
shi3z
原始信息汇总
数据集概述
许可
- 许可类型：llama2
任务类别
- 任务类别：conversational
语言
- 语言：ja（日语）
数据规模
- 数据规模：1K<n<10K
数据来源与处理
- 数据集基于日语版本的Wikipedia数据集，通过llama2Pro8B转换为多轮对话格式。
- 生成了10,000个对话，经过筛选后约有3,000个可用。
使用限制
- 该数据集可以用于商业服务。
数据质量
- 数据中可能包含一些未经人工筛选的奇怪对话。
生成与筛选
- 在A100 80GBx7机器上，24小时内生成了10,000个对话，并进行了自动筛选。
计算支持
- 计算由Tsuginosuke AI SuperComputer和FreeAI Ltd.提供。
