grimulkan/theory-of-mind

该数据集包含关于心理理论（Theory of Mind, TOM）的问答对，以Alpaca格式生成，使用了`gpt-4-1106-preview`模型。每个答案都经过`gpt-4-1106-preview`的双重检查，可疑的答案被移除，以提高准确性。数据集包含三个文件：`theory_of_mind.json`（150个条目）、`theory_of_mind_longer.json`（50个条目）和`theory_of_mind_airoboros_fixed.json`（339个条目，基于Airoboros数据集中的心理理论数据条目，经过GPT4重新生成和修正）。

许可证：未知

本数据集为基于Alpaca格式构建的心理理论（Theory of Mind）问答测试集，由`gpt-4-1106-preview`生成，适用OpenAI相关条款。

所有答案均由`gpt-4-1106-preview`完成双重校验，可疑答案已被剔除；鉴于即便GPT-4在该测试中也难以保证准确率，此举旨在提升数据集整体质量。本数据集不保证剩余条目均为正确答案，但整体准确率应优于基准版本。

**数据集文件：**
- `theory_of_mind.json`：常规双重校验版心理理论问答数据集，共150条数据
- `theory_of_mind_longer.json`：篇幅稍长的问答数据集，共50条数据
- `theory_of_mind_airoboros_fixed.json`：仅针对[Airoboros数据集](https://huggingface.co/datasets/jondurbin/airoboros-3.1)中的心理理论数据条目进行双重校验的版本，共计339条；GPT-4对其中多数条目进行了重新生成与修正，但这并不意味着原始条目本身存在错误。

原始信息汇总

数据集概述

数据集名称

• Q&A testing theory of mind

数据集格式

• Alpaca

生成工具

• gpt-4-1106-preview

许可协议

• 未知

数据集内容

• theory_of_mind.json: 常规的、经过双重检查的TOM问答数据集，包含150个条目。
• theory_of_mind_longer.json: 稍长的问答数据集，包含50个条目。
• theory_of_mind_airoboros_fixed.json: 从Airoboros数据集中提取的、经过双重检查的理论思维数据条目，包含339个条目，其中许多条目由GPT4重新生成或更正。