irds/wikir_en59k
收藏Hugging Face2023-01-05 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/irds/wikir_en59k
下载链接
链接失效反馈官方服务：
资源简介：
`wikir/en59k`数据集由`ir-datasets`包提供，主要用于文本检索任务。该数据集包含2,454,785个文档，可以通过`datasets`库加载和使用。
提供机构：
irds
原始信息汇总
数据集概述
数据集名称
wikir/en59k
数据来源
由 ir-datasets 包提供。
数据内容
- 文档 (
docs): 包含2,454,785个文档，每个文档包含doc_id和text字段。
使用方法
python from datasets import load_dataset
docs = load_dataset(irds/wikir_en59k, docs) for record in docs: record # {doc_id: ..., text: ...}
引用信息
@inproceedings{Frej2020Wikir, title={WIKIR: A Python toolkit for building a large-scale Wikipedia-based English Information Retrieval Dataset}, author={Jibril Frej and Didier Schwab and Jean-Pierre Chevallet}, booktitle={LREC}, year={2020} } @inproceedings{Frej2020MlWikir, title={MLWIKIR: A Python Toolkit for Building Large-scale Wikipedia-based Information Retrieval Datasets in Chinese, English, French, Italian, Japanese, Spanish and More}, author={Jibril Frej and Didier Schwab and Jean-Pierre Chevallet}, booktitle={CIRCLE}, year={2020} }
