five

irds/mr-tydi_fi_train

收藏
Hugging Face2023-01-05 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/irds/mr-tydi_fi_train
下载链接
链接失效反馈
官方服务:
资源简介:
`mr-tydi/fi/train`数据集由`ir-datasets`包提供,主要用于文本检索任务。该数据集包含6,561个查询(queries)和6,561个相关性评估(qrels)。文档(docs)部分需要使用`irds/mr-tydi_fi`数据集。数据集的使用示例代码展示了如何通过`datasets`库加载查询和相关性评估数据。
提供机构:
irds
原始信息汇总

数据集概述

数据集名称

mr-tydi/fi/train

数据来源

  • 源数据集:irds/mr-tydi_fi

任务类别

  • 文本检索

数据内容

  • queries(查询): 数量=6,561
  • qrels(相关性评估): 数量=6,561
  • docs(文档): 使用数据集irds/mr-tydi_fi

使用示例

python from datasets import load_dataset

加载查询数据

queries = load_dataset(irds/mr-tydi_fi_train, queries) for record in queries: record # {query_id: ..., text: ...}

加载相关性评估数据

qrels = load_dataset(irds/mr-tydi_fi_train, qrels) for record in qrels: record # {query_id: ..., doc_id: ..., relevance: ..., iteration: ...}

引用信息

@article{Zhang2021MrTyDi, title={{Mr. TyDi}: A Multi-lingual Benchmark for Dense Retrieval}, author={Xinyu Zhang and Xueguang Ma and Peng Shi and Jimmy Lin}, year={2021}, journal={arXiv:2108.08787}, } @article{Clark2020TyDiQa, title={{TyDi QA}: A Benchmark for Information-Seeking Question Answering in Typologically Diverse Languages}, author={Jonathan H. Clark and Eunsol Choi and Michael Collins and Dan Garrette and Tom Kwiatkowski and Vitaly Nikolaev and Jennimaria Palomaki}, year={2020}, journal={Transactions of the Association for Computational Linguistics} }

5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作