B

BigOBench

免费开源
cc-by-nc-4.0API 接入

价格

免费

下载次数

0

点赞数

0

数据描述

BigOBench 是由 Meta AI 发布的代码复杂度基准,包含约 300 道原创 Python 题目与 3105 道竞赛题、119 万余份人类解法,用于测试大语言模型能否在给定时间-空间复杂度约束下正确生成或分析代码。配套提供动态复杂度推断框架,可自动运行任意 Python 片段、测量运行时间和内存占用并判定其大 O 类别,是当前系统化评估 LLM「复杂度受控代码能力」的重要资源。

详细信息

来源类型API 接入
开源状态✅ 开源
授权协议cc-by-nc-4.0
数据语言-
数据量级-
交付格式-
仓库路径MetaAI/BigOBench
公开状态公开

标签

codequestion-answeringreinforcement-learningsynthetictext-classificationtext-generation

开源下载

免费

该数据集为开源数据集,可通过 Git 方式免费下载

# HTTPS

git lfs install && git clone https://aihub.caict.ac.cn/datasets/MetaAI/BigOBench.git