math_vista

MATHVISTA数据集是一个为了评估大型语言模型（LLMs）和大型多模态模型（LMMs）在视觉背景下的数学推理能力而设计的基准测试。该数据集由6,141个示例组成，这些示例来源于28个现有的多模态数据集，这些数据集涉及数学问题，以及3个新创建的数据集（IQTest、FunctionQA和PaperQA）。完成这些任务需要深入的视觉理解能力和组合推理能力，这些能力即使是最先进的基础模型也难以应对。