价格
免费
下载次数
0
点赞数
0
LLM-BabyBench 是由阿布扎比的穆罕默德·本·扎耶德人工智能大学(MBZUAI)于2025年5月17日发布的一个基准测试数据集,旨在评估大语言模型(LLMs)在基于环境的规划和推理任务上的表现。该基准测试建立在程序化生成的 BabyAI 网格世界的文本适配版本之上,通过评估 LLMs 在交互式环境约束下进行规划和推理的能力,来衡量其在基础智能的三个基本方面的能力:(1)预测动作对环境状态的影响(Predict 任务);(2)生成低级动作序列以实现指定的子目标(Plan 任务);(3)将高级任务分解为连贯的子目标序列(Decompose 任务)。
| 来源类型 | API 接入 |
| 开源状态 | ✅ 开源 |
| 授权协议 | mit |
| 数据语言 | - |
| 数据量级 | - |
| 交付格式 | - |
| 仓库路径 | MBZUAI/LLM-BabyBench |
| 公开状态 | 公开 |
该数据集为开源数据集,可通过 Git 方式免费下载
git lfs install && git clone https://aihub.caict.ac.cn/datasets/MBZUAI/LLM-BabyBench.git