MathVista 数学推理数据集

MathVista 是视觉环境中的综合数学推理基准。它由三个新创建的数据集 IQTest 、 FunctionQA 和 PaperQA 组成，它们解决了缺失的视觉领域，并分别用于评估拼图测试图的逻辑推理、功能图的代数推理以及学术论文图的科学推理。 MathVista 总共包含从 31 个不同数据集收集的 6,141 个示例。

MathVista is a comprehensive mathematical reasoning benchmark in visual environments. It consists of three newly created datasets, IQTest, FunctionQA, and PaperQA, which address under-explored visual domains. These three datasets are respectively used to evaluate logical reasoning on puzzle test images, algebraic reasoning on functional diagrams, and scientific reasoning on academic paper figures. In total, MathVista contains 6,141 examples collected from 31 distinct datasets.

搜集汇总

背景与挑战

背景概述

MathVista是一个视觉环境中的综合数学推理基准数据集，由IQTest、FunctionQA和PaperQA三个新创建的子集组成，分别用于评估逻辑、代数和科学推理能力。该数据集共包含6,141个示例，收集自31个不同来源。