SituatedQA

该数据集名为SituatedQA，是一个开放领域的问答数据集，其中每个问题都设定了一个特定的时空背景，它基于NQ-Open数据集构建而成。此外，模型在SituatedQA上的表现，展示了其在不同时间推理数据集上的泛化能力。这项任务的焦点是开放领域的时空推理。

This dataset, named SituatedQA, is an open-domain question answering dataset where every question is anchored to a specific spatiotemporal context. It is built upon the NQ-Open dataset. Furthermore, model performance on SituatedQA showcases their generalization abilities across diverse temporal reasoning datasets. The core focus of this task lies in open-domain spatiotemporal reasoning.

搜集汇总

背景与挑战

背景概述

SituatedQA是一个开放检索问答数据集，旨在研究问答系统中外部语言上下文（如时间和地点）对答案的影响。该数据集通过从现有QA数据集中识别上下文依赖问题，并众包收集不同上下文对应的答案构建而成，揭示了现有模型在动态更新或罕见地点信息处理上的局限性。