MathVista

MathVista是可视化环境中的一个综合数学推理基准。它由三个新创建的数据集组成，IQTest、FunctionQA和PaperQA，分别解决了缺失的视觉领域，并专门用于评估谜题测试图形的逻辑推理、函数图的代数推理和学术论文图形的科学推理。它还整合了文献中的9个MathQA数据集和19个VQA数据集，极大地丰富了我们基准测试中视觉感知和数学推理挑战的多样性和复杂性。MathVista总共包括从31个不同数据集中收集的6141个示例。