irds/codesearchnet_challenge

`codesearchnet/challenge`数据集由`ir-datasets`包提供，包含99个查询（即主题）和4,006个相关性评估（qrels）。文档部分需要从`irds/codesearchnet`数据集中获取。该数据集主要用于文本检索任务。

原始信息汇总

数据集概述

数据集名称

codesearchnet/challenge

数据来源

该数据集源自 irds/codesearchnet。

任务类别

• 文本检索

数据内容

• queries（查询主题）：共99条记录
• qrels（相关性评估）：共4,006条记录
• docs（文档）：使用 irds/codesearchnet 数据集

数据使用示例

python from datasets import load_dataset

queries = load_dataset(irds/codesearchnet_challenge, queries) for record in queries: record # {query_id: ..., text: ...}

qrels = load_dataset(irds/codesearchnet_challenge, qrels) for record in qrels: record # {query_id: ..., doc_id: ..., relevance: ..., note: ...}

引用信息

@article{Husain2019CodeSearchNet, title={CodeSearchNet Challenge: Evaluating the State of Semantic Code Search}, author={Hamel Husain and Ho-Hsiang Wu and Tiferet Gazit and Miltiadis Allamanis and Marc Brockschmidt}, journal={ArXiv}, year={2019} }