HiTZ/EusExams

EusExams是一个为准备巴斯克地区公共服务考试而设计的测试集合，涵盖了多个巴斯克机构的考试，包括公共卫生系统Osakidetza、巴斯克政府、毕尔巴鄂和加斯特伊斯市议会以及巴斯克大学（UPV/EHU）。每个考试包含2到4个选项（平均3.90个）的多项选择题，并有一个正确答案。数据集主要包含16k巴斯克语问题和18k西班牙语问题。

原始信息汇总

数据集概述

数据集名称

EusExams

数据集描述

EusExams 是一个为准备由多个巴斯克机构（包括公共健康系统 Osakidetza、巴斯克政府、比尔巴奥和加斯泰兹市议会以及巴斯克大学（UPV/EHU））举办的公共考试而设计的测试集合。每个组别中都有不同职位的公共考试，如行政和助理职位。每个多项选择题包含2到4个选项（平均3.90个）和一个正确答案。该数据集主要是平行的，包含16,000个巴斯克语问题和18,000个西班牙语问题。

任务类别

• 问答
• 多项选择

语言

• 巴斯克语 (eu)
• 西班牙语 (es)

标签

• 法律

数据集大小

• 10K<n<100K

配置

数据集包含多个配置文件，每个配置文件对应不同的测试集和语言版本。以下是部分配置示例：

• eu_opeosakiadmineu

  • 分割: test
  • 路径: "data/eu/opeosaki/opeosakiadmineu.jsonl"

• es_opeosakiadmin

  • 分割: test
  • 路径: "data/es/opeosaki/opeosakiadmin.jsonl"

示例

巴斯克语示例

txt Galdera: UPV/EHUREN ONDAREA HAU DA: A. UPV/EHUk jabetzan dituen ondasunak. B. UPV/EHUk jabetzan dituen ondasun eta eskubideak. C. UPV/EHUk jabetzan edo titularitatean dituen ondasun eta eskubideak, bai eta etorkizunean eskuratzen edo esleitzen zaizkion gainerako guztiak ere. D. UPV/EHUk jabetzan dituen ondasunak, bai eta etorkizunean eskuratzen dituen gainerako guztiak ere. Erantzuna: C

英语翻译

txt Question: UPV/EHU’S LEGACY IS: A. The property owned by UPV/EHU. B. The rights and property owned by the UPV/EHU. C. The rights and property of the UPV/EHU in ownership, as well as any other property acquired or assigned to it in the future. D. The property of the UPV/EHU in ownership, as well as any other property acquired or assigned to it in the future. Answer: C

引用

bibtex @misc{etxaniz2024latxa, title={{L}atxa: An Open Language Model and Evaluation Suite for {B}asque}, author={Julen Etxaniz and Oscar Sainz and Naiara Perez and Itziar Aldabe and German Rigau and Eneko Agirre and Aitor Ormazabal and Mikel Artetxe and Aitor Soroa}, year={2024}, eprint={2403.20266}, archivePrefix={arXiv}, primaryClass={cs.CL} }