遇见数据集

GitHub-Python

收藏
arXiv2025-09-30 收录
数据链接:
官方服务:

资源简介:

该数据集精心筛选了大约10万个去重后的Python文件,这些文件均来自于2023年1月1日之后创建的GitHub仓库,确保了数据的高质量和时效性。此外,该数据集被用于为CodeGPT模型创建非会员数据集。其规模达到10万个文件,任务是对CodeGPT模型进行微调。

This dataset carefully curates approximately 100,000 deduplicated Python files, all sourced from GitHub repositories created after January 1, 2023, ensuring high data quality and timeliness. Additionally, this dataset is utilized as a non-member training dataset for the CodeGPT model, which comprises 100,000 files and is intended for fine-tuning the CodeGPT model.

搜集汇总
数据集介绍
GitHub-Python 数据集图片
背景与挑战
背景概述
GitHub-Python是一个包含300万Python3代码片段的数据集,通过AST解析器划分为有语法错误的bad code和无错误的good code。该数据集主要用于无监督程序修复任务,为Break-It-Fix-It(BIFI)方法提供训练和评估基础。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务