hotpotqa-dev-llama3.1-8b-instruct-temp0.9-samples99-logprobs
收藏Hugging Face2026-03-23 更新2026-03-24 收录
下载链接:
https://huggingface.co/datasets/s-nlp/hotpotqa-dev-llama3.1-8b-instruct-temp0.9-samples99-logprobs
下载链接
链接失效反馈官方服务:
资源简介:
该数据集包含HotpotQA的自我一致性生成结果,使用Llama 3.1 8B模型,并为每个采样完成的生成添加了后验令牌级对数概率。数据集的主要文件为`predictions.parquet`,辅助文件为`merge_metadata.json`。重要列包括`question`(问题)、`answer`(答案)、`all_completions`(所有完成文本)、`all_logprobs`(所有对数概率)、`final_answer`(最终答案)和`num_scored_completions`(评分的完成数)。`all_logprobs[i]`包含`all_completions[i]`的令牌级对数概率。该数据集是通过对存储的完成文本进行后验评分而非重新生成样本来创建的,适用于文本生成和问答任务。
提供机构:
s-nlp
创建时间:
2026-03-23



