CUGE

CUGE 是一个中文语言理解和生成评估基准，具有以下特点： (1) 分层基准框架，其中数据集主要按照语言能力-任务-数据集层次结构进行选择和组织。 (2) 多级评分策略，基于分层框架提供不同级别的模型性能。 CUGE 涵盖了 7 种重要的语言能力、17 个主流 NLP 任务和 19 个具有代表性的数据集。它包括以下任务：分词、词性标注、阅读理解和文档检索。

搜集汇总

背景与挑战

背景概述

CUGE是一个中文语言理解和生成评估基准，采用分层框架和多级评分策略，覆盖7种语言能力、17个主流NLP任务和19个代表性数据集，包括分词、词性标注等任务。该数据集由清华大学、中国科学院和北京大学于2022年联合发布，旨在为中文NLP模型提供全面的评估标准。