BeIR/fever-qrels

BEIR Benchmark是一个异构基准，由18个不同的数据集组成，代表了9种信息检索任务，包括事实核查、问答、生物医学信息检索、新闻检索、论点检索、重复问题检索、引用预测、推文检索和实体检索。所有数据集都经过预处理，适用于实验。数据集的结构包括corpus、queries和qrels文件，分别存储文档、查询和相关性判断。

原始信息汇总

BEIR Benchmark 数据集概述

数据集描述

数据集摘要

BEIR是一个异构基准，由18个不同数据集组成，涵盖9种信息检索任务，包括事实核查、问答、生物医学信息检索、新闻检索等。

支持的任务和排行榜

BEIR支持多种任务，包括文本检索、零样本检索、信息检索等，并设有排行榜评估模型性能。

语言

所有任务均使用英语。

数据集结构

数据实例

数据集包含文档、查询和相关性判断文件，格式包括.jsonl和.tsv。

数据字段

• 文档：包含唯一文档ID、标题和文本。
• 查询：包含唯一查询ID和查询文本。
• 相关性判断：包含查询ID、文档ID和相关性分数。

数据分割

数据集根据不同任务和类型进行分割，如训练集、开发集和测试集。

数据集创建

来源数据

数据集由多个现有数据集组成，但具体的数据收集和标准化过程未详细说明。

许可信息

数据集遵循CC-BY-SA-4.0许可。

引用信息

引用该数据集时，应使用提供的引用格式。