Fermi

该数据集包含了一系列现实世界的问题，这些问题需要多跳推理和隐含推理技能。它还包括了286个“真实费米问题”，这些被用于评估多跳问答任务中的表现。

This dataset comprises a set of real-world problems that require multi-hop reasoning and implicit reasoning skills. It also includes 286 'true Fermi questions', which are utilized to evaluate performance in multi-hop question answering tasks.

搜集汇总

背景与挑战

背景概述

Fermi数据集是一个专注于费米问题的AI推理挑战数据集，包含两个部分：RealFP子集有928个真实费米问题及其程序化解决方案，SynthFP子集提供10000个模板化问题用于辅助训练。该数据集旨在评估AI系统通过逻辑推理估算数值的能力，并附带评估工具和学术引用。