irds/mr-tydi_bn_dev

`mr-tydi/bn/dev`数据集由ir-datasets包提供，主要用于文本检索任务。该数据集包含440个查询（即主题）和443个相关评估（qrels）。文档部分需要使用`irds/mr-tydi_bn`数据集。数据集的使用示例展示了如何加载查询和相关评估，并处理这些数据。引用信息包括两篇研究论文，分别讨论了多语言密集检索基准和信息寻求问答基准。

---
数据集名称: '`mr-tydi/bn/dev`'
数据集查看器: 禁用
源数据集: ['irds/mr-tydi_bn']
任务类别:
- 文本检索
---

# `mr-tydi/bn/dev` 数据集卡片

本`mr-tydi/bn/dev`数据集由[ir-datasets](https://ir-datasets.com/)工具包提供。
如需了解该数据集的更多详情，请参阅[官方文档](https://ir-datasets.com/mr-tydi#mr-tydi/bn/dev)。

# 数据内容

本数据集包含以下内容：
- `queries`（即查询主题）：共计440条
- `qrels`（相关性标注集）：共计443条

如需获取`docs`（文档集），请使用 [`irds/mr-tydi_bn`](https://huggingface.co/datasets/irds/mr-tydi_bn)

## 使用方法

python
from datasets import load_dataset

queries = load_dataset('irds/mr-tydi_bn_dev', 'queries')
for record in queries:
record # {'query_id': ..., 'text': ...}

qrels = load_dataset('irds/mr-tydi_bn_dev', 'qrels')
for record in qrels:
record # {'query_id': ..., 'doc_id': ..., 'relevance': ..., 'iteration': ...}

注意：调用`load_dataset`函数将自动下载该数据集（若数据集未公开，则会提供访问指引），并将数据以🤗 Hugging Face数据集格式存储副本。

## 引用信息

@article{Zhang2021MrTyDi,
title={{Mr. TyDi}: 面向密集检索的多语言基准数据集},
author={张新宇、马学广、史鹏、吉米·林},
year={2021},
journal={arXiv:2108.08787},
}
@article{Clark2020TyDiQa,
title={{TyDi QA}: 面向类型学多样语言的信息检索问答基准数据集},
author={乔纳森·H·克拉克、崔恩率、迈克尔·柯林斯、丹·加勒特、汤姆·克维亚特科夫斯基、维塔利·尼古拉耶夫、珍妮玛丽亚·帕洛马基},
year={2020},
journal={《计算语言学协会会刊》（Transactions of the Association for Computational Linguistics）}
}

原始信息汇总

数据集概述

数据集名称

mr-tydi/bn/dev

数据来源

• 源数据集：irds/mr-tydi_bn

数据内容

• queries（查询）：共440条
• qrels（相关性评估）：共443条
• docs（文档）：使用irds/mr-tydi_bn数据集

数据使用示例

python from datasets import load_dataset

queries = load_dataset(irds/mr-tydi_bn_dev, queries) for record in queries: record # {query_id: ..., text: ...}

qrels = load_dataset(irds/mr-tydi_bn_dev, qrels) for record in qrels: record # {query_id: ..., doc_id: ..., relevance: ..., iteration: ...}

引用信息

@article{Zhang2021MrTyDi, title={{Mr. TyDi}: A Multi-lingual Benchmark for Dense Retrieval}, author={Xinyu Zhang and Xueguang Ma and Peng Shi and Jimmy Lin}, year={2021}, journal={arXiv:2108.08787}, } @article{Clark2020TyDiQa, title={{TyDi QA}: A Benchmark for Information-Seeking Question Answering in Typologically Diverse Languages}, author={Jonathan H. Clark and Eunsol Choi and Michael Collins and Dan Garrette and Tom Kwiatkowski and Vitaly Nikolaev and Jennimaria Palomaki}, year={2020}, journal={Transactions of the Association for Computational Linguistics} }