认知智能水平评测数据集

认知智能水平评测数据集以机器阅读理解为载体，包含高考阅读理解可解释评测数据集、高考阅读理解对抗鲁棒评测数据集、儿童故事常识推理与寓意理解评测数据集，形成了面向开放环境的认知智能水平评测体系。认知智能水平评测数据集是2020年11月至2023年12月利用爬虫技术从互联网上采集相关语料并去重，采用自动标注和人工标注结合的方式进行加工。该数据集中共包含5529篇文本，其中高考阅读理解可解释评测数据集标注了7种错误选项类型与8种答题所需推理能力；高考阅读理解对抗鲁棒评测数据集包含关键词扰动、推理逻辑扰动、时空属性扰动、因果关系扰动等4种对抗攻击策略；儿童故事常识推理与寓意理解评测数据集包含社会常识、生物常识、物理常识、时间常识、空间常识等5种常识。

搜集汇总

背景与挑战

背景概述

该数据集以机器阅读理解为载体，包含高考阅读理解可解释评测、对抗鲁棒评测以及儿童故事常识推理与寓意理解评测三个子集，构建了面向开放环境的认知智能水平评测体系。数据采集于2020年11月至2023年12月，共包含5529篇文本，数据量为47.3MB，格式为json和docx。