C

CriticBench

免费开源
cc-by-3.0API 接入

价格

免费

下载次数

0

点赞数

0

数据描述

CriticBench 是上海人工智能实验室 OpenCompass 团队发布的综合评测基准,用 5 972 组人工精标样本(覆盖翻译、摘要、QA、数学推理、代码等 9 类任务)从 Feedback、Comparison、Refinement、Meta-feedback 四个维度衡量大模型“自我批判-纠正”能力;实验揭示了模型规模与 GQC(生成-批判-纠正)能力的线性关系以及跨模型批判的有趣现象,为可扩展监督与自我改进研究提供统一而可靠的测试平台 。

详细信息

来源类型API 接入
开源状态✅ 开源
授权协议cc-by-3.0
数据语言-
数据量级-
交付格式-
仓库路径Shanghai_AI_Laboratory/CriticBench
公开状态公开

开源下载

免费

该数据集为开源数据集,可通过 Git 方式免费下载

# HTTPS

git lfs install && git clone https://aihub.caict.ac.cn/datasets/Shanghai_AI_Laboratory/CriticBench.git