Y-NQ

# Dataset Card for Y-NQ

<!-- Provide a quick summary of the dataset. -->

The dataset is available in this csv file. The dataset is licensed under the Apache 2.0 license

### Dataset Description

<!-- Provide a longer summary of what this dataset is. -->

- Question ID: Unique identifier from Natural Question
- Split: Training or validation split from Natural Question
- English Document: English text document
- English Question: Question in English
- English Long Answer: Detailed answer in English
- English Short Answer: Brief answer in English
- Yorùbá Document: Yorùbá text document
- Yorùbá Rewrite Flag: Was Yorùbá document rewritten? (0-> no, 1-> yes)
- Yorùbá Question: Question in Yorùbá
- Yorùbá Short Answer: Brief answer in Yorùbá
- Yorùbá Long Answer: Detailed answer in Yorùbá
- Yorùbá Paragraph Info: Contextual information
- Answer Alignment: Semantic equivalence (0-> not literal, 1-> literal)
- Answer_Alignment_English_Wrong_Answer: 1 english answer is wrong

# Y-NQ 数据集卡片
<!-- 请提供数据集的简要概述。 -->
本数据集可通过该CSV文件获取，采用Apache 2.0开源许可证进行授权。

### 数据集详情
<!-- 请提供关于数据集的详细说明。 -->
- 问题ID：源自自然问题（Natural Question）数据集的唯一标识符
- 数据集划分：源自自然问题数据集的训练集或验证集划分
- 英文文档：英文文本文档
- 英文问题：英文表述的查询问题
- 英文长答案：英文详细完整答案
- 英文短答案：英文简洁扼要答案
- 约鲁巴语文档：约鲁巴语文本文档
- 约鲁巴文档重写标记：约鲁巴文档是否经过重写？（0代表未重写，1代表已重写）
- 约鲁巴语问题：约鲁巴语表述的查询问题
- 约鲁巴语短答案：约鲁巴语简洁扼要答案
- 约鲁巴语长答案：约鲁巴语详细完整答案
- 约鲁巴语段落信息：上下文关联信息
- 答案对齐标记：答案语义等价性标记（0代表非字面语义等价，1代表字面语义等价）
- 英文错误答案对齐标记：1代表英文答案存在错误

搜集汇总

背景与挑战

背景概述

Y-NQ是一个基于Natural Questions的双语问答数据集，包含英语和约鲁巴语的平行文档、问题及长短答案，特别标注了语义对齐关系和改写信息。数据集采用CSV格式存储，遵循Apache 2.0许可协议。