价格
免费
下载次数
0
点赞数
0
SWE-bench_Lite 是评估大语言模型“自动修 Bug”能力而推出的轻量版基准。它从 11 个热门 Python 仓库中精选 300 条真实 GitHub issue-PR 对,每个任务给出问题描述和对应代码库快照,最终通过单元测试是否通过来判定补丁正确性
| 来源类型 | API 接入 |
| 开源状态 | ✅ 开源 |
| 授权协议 | mit |
| 数据语言 | - |
| 数据量级 | - |
| 交付格式 | - |
| 仓库路径 | SWE-bench/SWE-bench_Lite |
| 公开状态 | 公开 |
该数据集为开源数据集,可通过 Git 方式免费下载
git lfs install && git clone https://aihub.caict.ac.cn/datasets/SWE-bench/SWE-bench_Lite.git