Big Bench Hard专注于提供一系列具有挑战性的自然语言处理任务，这些任务是BIG-Bench数据集的子集，包含23个对当前语言模型来说难度较高的任务。它支持问答、文本分类、文本生成等多种任务类型，并提供英文数据。数据集中的每个子集包含250个样本，数据以文本输入和标签的形式组织。该仓库基于MIT许可发布，鼓励社区贡献。
Big Bench Hard是BIG Bench数据集的一个子集，包含23个对当前语言模型特别具有挑战性的任务。这些任务包括布尔表达式评估、因果判断、日期理解、歧义消解问答、Dyck语言预测、形式谬误三段论否定、几何形状识别、形容词顺序判断、逻辑推理、电影推荐、多步算术、导航、物品计数、企鹅表格分析、彩色物体推理、名字幽默修改、翻译错误检测、讽刺识别、体育理解、时间序列、跟踪洗牌对象、谎言网络评估
Big Bench Hard专注于提供一系列具有挑战性的自然语言处理任务，这些任务是BIG-Bench数据集的子集，包含23个对当前语言模型来说难度较高的任务。它支持问答、文本分类、文本生成等多种任务类型，并提供英文数据。数据集中的每个子集包含250个样本，数据以文本输入和标签的形式组织。该仓库基于MIT许可发布，鼓励社区贡献。
