L

LLM-BabyBench

免费开源
mitAPI 接入

价格

免费

下载次数

0

点赞数

0

数据描述

LLM-BabyBench 是由阿布扎比的穆罕默德·本·扎耶德人工智能大学(MBZUAI)于2025年5月17日发布的一个基准测试数据集,旨在评估大语言模型(LLMs)在基于环境的规划和推理任务上的表现。该基准测试建立在程序化生成的 BabyAI 网格世界的文本适配版本之上,通过评估 LLMs 在交互式环境约束下进行规划和推理的能力,来衡量其在基础智能的三个基本方面的能力:(1)预测动作对环境状态的影响(Predict 任务);(2)生成低级动作序列以实现指定的子目标(Plan 任务);(3)将高级任务分解为连贯的子目标序列(Decompose 任务)。

详细信息

来源类型API 接入
开源状态✅ 开源
授权协议mit
数据语言-
数据量级-
交付格式-
仓库路径MBZUAI/LLM-BabyBench
公开状态公开

标签

benchmark

开源下载

免费

该数据集为开源数据集,可通过 Git 方式免费下载

# HTTPS

git lfs install && git clone https://aihub.caict.ac.cn/datasets/MBZUAI/LLM-BabyBench.git