shamotskyi/lmes_WIS
收藏Hugging Face2024-04-26 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/shamotskyi/lmes_WIS
下载链接
链接失效反馈官方服务：
资源简介：
LMES-WIS数据集是Eval-UA-tion基准测试的一部分，旨在评估大语言模型（LLMs）在乌克兰语方面的能力。该数据集受到LMentry基准测试的启发，包含诸如‘句子中的第五个单词是什么’之类的问题。更详细的描述将在后续提供。
LMES-WIS数据集是Eval-UA-tion基准测试的一部分，旨在评估大语言模型（LLMs）在乌克兰语方面的能力。该数据集受到LMentry基准测试的启发，包含诸如‘句子中的第五个单词是什么’之类的问题。更详细的描述将在后续提供。
提供机构：
shamotskyi
原始信息汇总
数据集卡片 LMES-WIS (Eval-UA-tion 基准测试)
概述
该数据集是 LMentry-static-UA 任务集合的一部分，属于 Eval-UA-tion 基准测试，旨在评估 (L)LMs 的乌克兰语能力。数据集灵感来源于 LMentry 基准测试。
数据文件
- 配置名称: default
- 训练集: data/WISTask.jsonl
- 小样本集: data/WISTask_fewshot.jsonl
任务描述
LMES-WIS 提出多种形式的语言理解问题，例如“句子中的第五个单词是什么...”。关于人类和随机基线的详细信息，请参阅相关论文。
