BrainGPT/BrainBench_GPT-4_v0.1.csv

BrainBench是一个面向未来的神经科学基准测试，用于评估测试者预测神经科学结果的能力。其测试案例来源于《Journal of Neuroscience》的摘要，涵盖了五个神经科学领域：行为/认知、系统/电路、疾病神经生物学、细胞/分子以及发育/可塑性/修复。测试者需要在原始摘要和经过修改的摘要之间做出选择，修改后的摘要显著改变了结果但保持了连贯性。人类专家和语言模型（LLMs）参与了测试，人类专家在在线研究中做出选择并提供信心和专业知识评级，而LLMs则根据困惑度选择正确的摘要版本，其信心与两个选项之间的困惑度差异成正比。

原始信息汇总

数据集概述

配置信息

• 配置名称: default
• 数据文件:
  • 拆分: train
  • 路径: data/train-*

数据集信息

• 特征:
  • 名称: doi
    • 数据类型: string
  • 名称: journal_section
    • 数据类型: string
  • 名称: original_abstract
    • 数据类型: string
  • 名称: incorrect_abstract
    • 数据类型: string
• 拆分:
  • 名称: train
    • 字节数: 314072
    • 样本数: 100
• 下载大小: 186330
• 数据集大小: 314072