sbx/superlim-2

SuperLim 2.0是SuperLim 1.0的延续，旨在为瑞典自然语言理解系统的评估和分析提供一个标准化的套件。该项目受到GLUE/SuperGLUE项目的启发，名称中的“lim”是瑞典语中“glue”的翻译。数据集支持多种任务，包括多项选择、文本分类、问答、句子相似度和标记分类。数据集的语言为瑞典语，且大多数数据集包含训练、开发和测试分割。

原始信息汇总

数据集概述

数据集名称

• 名称: SuperLim 2.0

数据集描述

• 描述: SuperLim 2.0 是一个标准化套件，用于评估和分析瑞典自然语言理解系统。该项目灵感来源于GLUE/SuperGLUE项目，名称中的“lim”是瑞典语中“glue”的翻译。

语言

• 语言: 瑞典语 (sv)

任务类别

• 任务类别:
  • 多选题
  • 文本分类
  • 问答
  • 句子相似度
  • 词性标注

具体任务

• 具体任务:
  • 情感分析
  • 可接受性分类
  • 封闭领域问答
  • 词义消歧
  • 指代消解

数据集结构

• 数据分割:
  • 大多数数据集包含训练集、开发集和测试集。
  • 部分数据集（supersim, sweanalogy, swesat-synonyms）仅包含训练集和测试集。
  • 诊断任务（swediagnostics, swewinogender）仅包含测试集，但可用于评估基于swenli训练的模型。

数据集创建

• 贡献者: Felix Morger

引用信息

• 标准引用: 即将在EMNLP 2023中出现，具体引用信息待公布。