irds/mr-tydi_ar_dev

mr-tydi/ar/dev数据集，由ir-datasets包提供，包含3,115个查询及其相关性评估，用于文本检索任务。文档数据需从irds/mr-tydi_ar获取。

---
易读名称：`mr-tydi/ar/dev`
查看器：禁用
源数据集：['irds/mr-tydi_ar']
任务类别：
- 文本检索
---

# `mr-tydi/ar/dev` 数据集卡片
本`mr-tydi/ar/dev`数据集由[ir-datasets](https://ir-datasets.com/)工具包提供。如需了解该数据集的更多详情，请参阅[官方文档](https://ir-datasets.com/mr-tydi#mr-tydi/ar/dev)。

# 数据集内容
本数据集包含以下内容：
- `queries`（即查询主题）：共计3115条
- `qrels`（即相关性标注）：共计3115条
- 如需获取文档数据，请使用 [`irds/mr-tydi_ar`](https://huggingface.co/datasets/irds/mr-tydi_ar) 数据集。

# 使用方法
python
from datasets import load_dataset

queries = load_dataset('irds/mr-tydi_ar_dev', 'queries')
for record in queries:
record # {'query_id': ..., 'text': ...}

qrels = load_dataset('irds/mr-tydi_ar_dev', 'qrels')
for record in qrels:
record # {'query_id': ..., 'doc_id': ..., 'relevance': ..., 'iteration': ...}

请注意，调用`load_dataset`函数将自动下载该数据集（若数据集未公开，则会提供获取指引），并将数据转换为🤗数据集格式进行本地存储。

# 引用信息

@article{Zhang2021MrTyDi,
title={{Mr. TyDi}: A Multi-lingual Benchmark for Dense Retrieval},
author={Xinyu Zhang and Xueguang Ma and Peng Shi and Jimmy Lin},
year={2021},
journal={arXiv:2108.08787},
}
@article{Clark2020TyDiQa,
title={{TyDi QA}: A Benchmark for Information-Seeking Question Answering in Typologically Diverse Languages},
author={Jonathan H. Clark and Eunsol Choi and Michael Collins and Dan Garrette and Tom Kwiatkowski and Vitaly Nikolaev and Jennimaria Palomaki},
year={2020},
journal={Transactions of the Association for Computational Linguistics}
}

原始信息汇总

数据集概述

数据集名称

mr-tydi/ar/dev

数据集来源

由ir-datasets提供。

数据内容

• queries（查询）: 数量=3,115
• qrels（相关性评估）: 数量=3,115
• docs（文档）: 使用irds/mr-tydi_ar

使用示例

python from datasets import load_dataset

queries = load_dataset(irds/mr-tydi_ar_dev, queries) for record in queries: record # {query_id: ..., text: ...}

qrels = load_dataset(irds/mr-tydi_ar_dev, qrels) for record in qrels: record # {query_id: ..., doc_id: ..., relevance: ..., iteration: ...}

引用信息

@article{Zhang2021MrTyDi, title={{Mr. TyDi}: A Multi-lingual Benchmark for Dense Retrieval}, author={Xinyu Zhang and Xueguang Ma and Peng Shi and Jimmy Lin}, year={2021}, journal={arXiv:2108.08787}, } @article{Clark2020TyDiQa, title={{TyDi QA}: A Benchmark for Information-Seeking Question Answering in Typologically Diverse Languages}, author={Jonathan H. Clark and Eunsol Choi and Michael Collins and Dan Garrette and Tom Kwiatkowski and Vitaly Nikolaev and Jennimaria Palomaki}, year={2020}, journal={Transactions of the Association for Computational Linguistics} }