JGLUE

该数据集名为JGLUE，旨在评估多语种大型语言模型（LLM）在英语自然语言理解任务及其相应日语任务之间的跨语言迁移性能。数据集包含了多种指令模板，以确保对每个任务进行公平的评价。此外，数据集中还包含了用于限制输出格式的正则表达式，并旨在评估模型在零样本和微调设置下的性能。该数据集所针对的任务是自然语言理解（NLU）。