PECC
收藏arXiv2025-09-30 收录
下载链接:
https://github.com/hallerpatrick/pecc
下载链接
链接失效反馈官方服务:
资源简介:
该数据集来源于“ Advent of Code”(AoC)挑战和“Project Euler”项目,包含共计2,352个问题,旨在通过多种问题形式来测试大型语言模型(LLM)的问题解决能力。该数据集不仅包括叙述性嵌入问题,也包含中性风格的挑战,为评估LLM在理解和解决复杂编程任务方面的能力提供了丰富的基准。数据集规模达到2,352个问题,任务涉及问题提取和代码生成。
提供机构:
Derived from Advent of Code and Project Euler



