sapienzanlp/truthful_qa_italian

该数据集是TruthfulQA的意大利语翻译版本，主要用于基于事实的问答任务。数据集包含需要事实知识才能正确回答的问题，并设计了两种多选题任务：一种是选择唯一正确答案，另一种是选择所有正确答案。数据集包括验证集，共812行，且完全并行于英语和意大利语。翻译过程使用了开源工具OBenTO-LLM，确保了翻译的透明性和可重复性。

This dataset is an Italian translation of TruthfulQA, designed for fact-based question answering. It contains questions that require factual knowledge to answer correctly and avoid misconceptions. The dataset includes two task variants: multiple-choice 1 and multiple-choice 2. The dataset is fully parallel between English and Italian, allowing for comparable evaluation setups and results across the two languages. The translation process was carried out using the open-source LLM tool OBenTO-LLM.

原始信息汇总

TruthfulQA - Italian (IT)

数据集概述

• 任务类别: 文本生成
• 语言: 意大利语, 英语
• 数据规模: n<1K
• 配置:
  • 名称: default
  • 数据文件:
    • 分割: validation
    • 路径: truthful_qa.validation.json

数据集详情

• 类型: 问答数据集
• 任务:
  • 多选1: 从多个选项中选择一个正确答案。
  • 多选2: 从多个选项中选择所有正确答案。
• 分割:
  • 验证集: 812行

数据集特点

• 语言: 数据集在英语和意大利语之间完全平行。
• 翻译工具: 使用🍱 OBenTO-LLM进行翻译。
• 差异: 由于翻译过程，数据集实例数量少于原始数据集。

数据格式

• 字段:
  • id: 样本唯一ID
  • category: 任务类型
  • input_text: 原始英语句子
  • input_text_translation: 意大利语翻译
  • choices: 原始英语选项
  • choice_translations: 意大利语选项翻译
  • label: 正确答案的索引

许可证

• 类型: Apache 2.0