mkshing/tydiqa_ja
收藏Hugging Face2023-06-23 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/mkshing/tydiqa_ja
下载链接
链接失效反馈官方服务：
资源简介：
这是TyDi QA数据集的日语子集。主要任务包括训练集和验证集的示例数量，分别为16288和1709。次要任务没有包含日语数据。README还提供了一个Python脚本示例，用于从数据集中过滤出日语数据。
这是TyDi QA数据集的日语子集。主要任务包括训练集和验证集的示例数量，分别为16288和1709。次要任务没有包含日语数据。README还提供了一个Python脚本示例，用于从数据集中过滤出日语数据。
提供机构：
mkshing
原始信息汇总
数据集概述
数据集名称
- 本数据集为TyDi QA的日语子集。
数据集内容
-
主要任务数据量
- 训练集：16288条（原始数据：166916条）
- 验证集：1709条（原始数据：18670条）
-
次要任务
- 无日语数据
数据集使用许可
- Apache-2.0许可证
数据集筛选脚本
python from datasets import load_dataset
dataset = load_dataset("tydiqa", "secondary_task") ja_dataset = dataset.filter(lambda example: example[id].startswith(jp))
