geniacllm/jp-effective-instructions-askllm-v1
收藏Hugging Face2024-08-11 更新2024-06-12 收录
下载链接：
https://hf-mirror.com/datasets/geniacllm/jp-effective-instructions-askllm-v1
下载链接
链接失效反馈官方服务：
资源简介：
---
license: other
license_name: mixed-liscence
license_link: LICENSE
---
# jp-effective-instructions-askllm-v1
データセット [kunishou/jp-effective-instructions](https://huggingface.co/datasets/kunishou/jp-effective-instructions) に対して、 Ask-LLM 手法でスコア付けしたデータセットです。
元データセットのカラムに加え `askllm_score` というカラムが追加されており、ここに Ask-LLM のスコアが格納されています。
Ask-LLM でスコア付けに使用した LLM は [Rakuten/RakutenAI-7B-instruct](https://huggingface.co/Rakuten/RakutenAI-7B-instruct) で、プロンプトは以下の通りです。
```
###
{data}
###
Does the previous paragraph demarcated within ### and ### contain informative signal for pre-training a large-language model? An informative datapoint should be well-formatted, contain some usable knowledge of the world, and strictly NOT have any harmful, racist, sexist, etc. content.
OPTIONS: yes / no
ANSWER:
```
- 元データセット
- https://huggingface.co/datasets/kunishou/jp-effective-instructions
- Ask-LLM 手法
- https://arxiv.org/abs/2402.09668
- https://speakerdeck.com/s_ota/ask-llm-20240313
- https://github.com/susumuota/nano-askllm
ライセンスはオリジナルのデータセットのライセンスに従います。
---
license: other
license_name: mixed-liscence
license_link: LICENSE
---
# jp-effective-instructions-askllm-v1
本数据集是对数据集[kunishou/jp-effective-instructions](https://huggingface.co/datasets/kunishou/jp-effective-instructions)采用Ask-LLM方法进行评分后得到的数据集。
除原始数据集的列外，新增了`askllm_score`列，该列存储Ask-LLM的评分。
Ask-LLM用于评分的大语言模型（LLM）为[Rakuten/RakutenAI-7B-instruct](https://huggingface.co/Rakuten/RakutenAI-7B-instruct)，提示词如下：
###
{data}
###
Does the previous paragraph demarcated within ### and ### contain informative signal for pre-training a large-language model? An informative datapoint should be well-formatted, contain some usable knowledge of the world, and strictly NOT have any harmful, racist, sexist, etc. content.
OPTIONS: yes / no
ANSWER:
- 原始数据集
- https://huggingface.co/datasets/kunishou/jp-effective-instructions
- Ask-LLM方法
- https://arxiv.org/abs/2402.09668
- https://speakerdeck.com/s_ota/ask-llm-20240313
- https://github.com/susumuota/nano-askllm
许可证遵循原始数据集的许可证。
提供机构：
geniacllm
