C

CodeMMLU

免费开源
mitAPI 接入

价格

免费

下载次数

0

点赞数

0

数据描述

CodeMMLU 是一个全面的基准测试,旨在评估大型语言模型(LLMs)在编码和软件知识方面的能力。它基于多项选择问答(MCQA)的结构,涵盖了广泛的编程任务和领域,包括代码生成、缺陷检测、软件工程原理等。

详细信息

来源类型API 接入
开源状态✅ 开源
授权协议mit
数据语言-
数据量级-
交付格式-
仓库路径Monash/CodeMMLU
公开状态公开

标签

codequestion-answering

开源下载

免费

该数据集为开源数据集,可通过 Git 方式免费下载

# HTTPS

git lfs install && git clone https://aihub.caict.ac.cn/datasets/Monash/CodeMMLU.git