malhajar/truthful_qa-tr-v0.2

`malhajar/truthful_qa-tr-v0.2`数据集是`mukayese/truthful_qa-tr`的直接克隆，用于OpenLLMTurkishLeaderboardv0.2。该数据集是土耳其语LLM发展系列数据集的一部分，旨在建立严格的土耳其语基准来评估土耳其语LLM的性能。`TruthfulQA`是一个旨在衡量语言模型是否生成真实答案的基准，包含817个问题，涵盖38个类别，如健康、法律、金融和政治。这些问题设计得让一些人类可能会因误解而给出错误答案。

原始信息汇总

数据集概述

数据集名称

malhajar/truthful_qa-tr-v0.2

数据集特征

• question
  • 数据类型：string
• mc1_targets
  • 结构：
    • choices
      • 数据类型：sequence of string
    • labels
      • 数据类型：sequence of int64
• mc2_targets
  • 结构：
    • choices
      • 数据类型：sequence of string
    • labels
      • 数据类型：sequence of int64

数据集分割

• validation
  • 数据大小：716108 bytes
  • 示例数量：817

数据集大小

• 下载大小：303337 bytes
• 数据集总大小：716108 bytes

配置

• config_name: default
  • data_files
    • split: validation
      • path: data/validation-*