首页/数据集/An Empirical Evaluation of GitHub Copilot’s Code Suggestions

An Empirical Evaluation of GitHub Copilot’s Code Suggestions

Name: An Empirical Evaluation of GitHub Copilot’s Code Suggestions
Creator: Nadi, Sarah; Nguyen, Nhan
Published: 2022-03-29T00:00:00+08:00

Figshare2022-03-29 更新2026-04-08 收录

AI辅助编程

代码生成评估

数据链接：

https://figshare.com/articles/dataset/An_Empirical_Evaluation_of_GitHub_Copilot_s_Code_Suggestions/18515141/2 数据链接链接失效反馈

官方服务：

资源简介：

Artifact accompanying MSR 2022 paper titled "An Empirical Evaluation of GitHub Copilot’s Code Suggestions" by Nhan Nguyen and Sarah Nadi

应用场景：

提供机构：

Nadi, Sarah; Nguyen, Nhan

创建时间：

2022-03-29

代码生成评估

编程解决方案

该数据集包含编程相关的信息，如问题ID、子任务、提示信息、生成内容、代码、使用的编程语言、解决方案数量、唯一标识符等。数据集还包含了模型参数信息和元数据信息，如使用的令牌数、时间戳等。数据集被划分为训练集，并提供了相应的数据文件路径。

Hugging Face2025-03-04 更新70

Real-World functions

代码生成评估

软件工程任务

10 real-world programming problems collected from the DevEval (https://github.com/seketeam/DevEval) dataset. Used in CoCoEvo.

Figshare2025-05-28 更新20

CodeGolf Bench

代码生成评估

代码优化基准

CodeGolf Bench是由独立研究者Vedant Padwal创建的一个多语言代码生成基准数据集，旨在评估大型语言模型在60种编程语言中生成简洁高效代码的能力。该数据集基于代码高尔夫（code golf）竞赛平台，包含115个涵盖艺术、计算、游戏、数学、序列和转换等六类问题，每个问题均配有标准测试用例和实时人类解决方案基线。数据集的构建过程通过自动化API从code.golf平台获取问题陈述

arXiv2026-05-28 更新20

ioi-leaderboard/ioi-eval-sglang_mistralai_Codestral-22B-v0.1-new-prompt

代码生成评估

编程问题

该数据集是一个包含编程问题及其相关信息的集合，其中包括问题ID、子任务、提示信息、生成内容、代码、编程语言、解决方案数量、唯一标识符以及模型参数等字段。数据集分为训练集，包含2050个示例，总大小为21183971字节。

Hugging Face2025-03-03 更新60

Intelligenzsprache im 2024

编程语言设计

AI辅助编程

Die Welt der Programmierung befindet sich im Wandel. Mit dem Aufkommen intelligenter Sprachwerkzeuge entwickelt sich die Kunst und Weise, wie wir Software entwickeln, von Grund auf neu. An der Spitze

DataONE2024-05-11 更新20

An Empirical Evaluation of GitHub Copilot’s Code Suggestions

资源简介：

相关数据集