GCRC

我们收集了近10年的高考阅读理解试题，构建了一个包含5,000多篇课文和8,700多个选择题 (关于15,000个选项) 的数据集GCRC (来自高考汉语的一个新的可解释评价MRC数据集)。数据集中标记了三种信息: 句子级支持事实，干扰因素的错误原因 (错误选项)，回答问题所需的推理能力以及从中间推理和模型能力两个方面进行可解释的评估。相关实验表明，该数据集更具挑战性，对于以可解释的方式诊断系统局限性非常有用，将有助于研究人员开发新的机器学习和推理方法来解决未来这些具有挑战性的问题。