five

Fsoft-AIC/CodeMMLU

收藏
Hugging Face2025-05-12 更新2025-04-12 收录
下载链接:
https://hf-mirror.com/datasets/Fsoft-AIC/CodeMMLU
下载链接
链接失效反馈
官方服务:
资源简介:
CodeMMLU是一个多任务基准,用于评估大型语言模型在编码和软件知识方面的能力。它基于多项选择题问答(MCQA)框架,覆盖了代码生成、缺陷检测、软件工程原则等多个编程任务和领域。

CodeMMLU is a comprehensive benchmark designed to evaluate the capabilities of large language models (LLMs) in coding and software knowledge. It builds upon the structure of multiple-choice question answering (MCQA) to cover a wide range of programming tasks and domains, including code generation, defect detection, software engineering principles, and much more.
提供机构:
Fsoft-AIC
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作