BeIR/hotpotqa

BEIR Benchmark是一个异构的基准测试，由18个不同的数据集组成，涵盖了9种信息检索任务，包括事实核查、问答、生物医学信息检索、新闻检索、论点检索、重复问题检索、引文预测、推文检索和实体检索。所有数据集均为英文，并且已经过预处理，可以直接用于实验。数据集的结构包括corpus、queries和qrels文件，分别用于存储文档、查询和查询与文档的相关性判断。

原始信息汇总

BEIR Benchmark 数据集概述

数据集描述

数据集摘要

BEIR是一个异构基准，由18个不同数据集组成，涵盖9种信息检索任务，包括事实检查、问答、生物医学信息检索等。

支持的任务和排行榜

数据集支持多种任务，如文本检索、零样本检索、信息检索等，并设有排行榜评估模型性能。

语言

数据集所有任务均使用英语。

数据集结构

数据实例

数据集包含文档、查询和相关性判断文件，格式包括.jsonl和.tsv。

数据字段

• 文档：包含唯一ID、标题和文本。
• 查询：包含唯一ID和查询文本。
• 相关性判断：包含查询ID、文档ID和相关性分数。

数据分割

数据集根据不同任务和数据集进行分割，如训练集、开发集和测试集。

数据集创建

数据集来源

数据集由多个现有数据集组成，每个数据集都有其特定的任务和格式。

许可证信息

数据集遵循CC-BY-SA-4.0许可证。

引用信息

引用此数据集时，应使用提供的引用格式。

贡献者

感谢@Nthakur20为数据集的贡献。