价格
免费
下载次数
0
点赞数
0
CriticBench 是上海人工智能实验室 OpenCompass 团队发布的综合评测基准,用 5 972 组人工精标样本(覆盖翻译、摘要、QA、数学推理、代码等 9 类任务)从 Feedback、Comparison、Refinement、Meta-feedback 四个维度衡量大模型“自我批判-纠正”能力;实验揭示了模型规模与 GQC(生成-批判-纠正)能力的线性关系以及跨模型批判的有趣现象,为可扩展监督与自我改进研究提供统一而可靠的测试平台 。
| 来源类型 | API 接入 |
| 开源状态 | ✅ 开源 |
| 授权协议 | cc-by-3.0 |
| 数据语言 | - |
| 数据量级 | - |
| 交付格式 | - |
| 仓库路径 | Shanghai_AI_Laboratory/CriticBench |
| 公开状态 | 公开 |
该数据集为开源数据集,可通过 Git 方式免费下载
git lfs install && git clone https://aihub.caict.ac.cn/datasets/Shanghai_AI_Laboratory/CriticBench.git