GSM8K数学推理评测数据集

GSM8K（Grade School Math 8K）是由OpenAI发布的大规模小学数学应用题数据集，旨在评估和提升语言模型的多步数学推理能力。该数据集包含8,500道高质量、语言多样化的小学数学应用题，由人工问题编写者创建，并经过严格的质量控制。每道题目都配有详细的自然语言解答，展示从问题到答案的完整推理过程。GSM8K数据集于2021年10月随论文《Training Verifiers to Solve Math Word Problems》一同发布，已成为评估大语言模型数学推理能力的标准基准测试之一。该数据集的设计目标是诊断当前模型的失败模式并支持相关研究，特别是在多步数学推理这一语言模型仍难以稳健执行的任务领域。

搜集汇总

背景与挑战

背景概述

GSM8K数学推理评测数据集由OpenAI发布，包含8,500道高质量、语言多样化的小学数学应用题，每道题均配有详细自然语言解答，旨在评估和提升语言模型的多步数学推理能力。该数据集于2021年随论文《Training Verifiers to Solve Math Word Problems》发布，已成为评估大语言模型数学推理能力的标准基准测试之一。