iohadrubin/nq_bm25_top100
收藏Hugging Face2024-04-15 更新2024-06-12 收录
下载链接:
https://hf-mirror.com/datasets/iohadrubin/nq_bm25_top100
下载链接
链接失效反馈官方服务:
资源简介:
数据集nq_bm25_top100包含自然语言处理任务中的问答数据,分为训练集、验证集和测试集。每个样本包含一个问题、对应的答案、问题ID以及从Wikipedia DPR索引中检索到的上下文信息。数据集的生成过程使用了Pyserini库进行搜索,并通过多线程处理提高了效率。
数据集nq_bm25_top100包含自然语言处理任务中的问答数据,分为训练集、验证集和测试集。每个样本包含一个问题、对应的答案、问题ID以及从Wikipedia DPR索引中检索到的上下文信息。数据集的生成过程使用了Pyserini库进行搜索,并通过多线程处理提高了效率。
提供机构:
iohadrubin
原始信息汇总
数据集概述
数据集名称
- 名称: nq_bm25_top100
数据集配置
- 配置名称: default
- 数据文件:
- 训练集: data/train-*
- 验证集: data/validation-*
- 测试集: data/test-*
数据集特征
- 特征名称: question
- 数据类型: string
- 特征名称: answer
- 数据类型: string
- 是否序列: 是
- 特征名称: qid
- 数据类型: string
- 特征名称: ctxs
- 数据类型: string
- 是否序列: 是
数据集分割
- 训练集:
- 字节数: 5029465701
- 示例数量: 79168
- 验证集:
- 字节数: 556151568
- 示例数量: 8757
- 测试集:
- 字节数: 230146934
- 示例数量: 3610
数据集大小
- 下载大小: 3270179648
- 数据集总大小: 5815764203



