ProtoQA

ProtoQA 是一个问答数据集，用于在这种原型情况下训练和评估人工智能系统的常识推理能力。训练集是从一个长期运行的国际游戏节目 FAMILY-FEUD 中播放的一组现有问题中收集的。隐藏评估集是通过收集来自 100 名群众工作者的每个问题的答案而创建的。

ProtoQA is a question answering dataset dedicated to training and evaluating the commonsense reasoning capabilities of AI systems in such prototypical scenarios. The training set is collected from a set of existing questions aired on the long-running international game show FAMILY-FEUD. The hidden evaluation set is created by collecting answers to each question from 100 crowd workers.

搜集汇总

背景与挑战

背景概述

ProtoQA是一个用于训练和评估人工智能系统常识推理能力的问答数据集，其训练集来源于国际游戏节目FAMILY-FEUD的问题，隐藏评估集则通过群众工作者的答案收集而成。该数据集由马萨诸塞大学于2020年发布，适用于文本自然语言处理和视觉问答等任务。