grimulkan/physical-reasoning

该数据集是一个关于物理推理的问答数据集，以Alpaca格式生成，使用了`gpt-4-1106-preview`模型。每个答案都经过双重检查，并移除了可疑的答案，以提高准确性。数据集包含多种类型的问题，如视线问题、温度相关问题、压力相关问题、重力效应等。数据集分为三个文件：`physical_reasoning.json`包含500个基于自然世界的物理推理问题，`physical_reasoning_longer.json`包含149个稍长的问题，`physical_reasoning_magic.json`包含250个假设世界具有魔法属性并测试推理能力的问题。

原始信息汇总

数据集概述

数据集名称

• Q&A testing physical reasoning

数据集格式

• JSON

数据集文件

1. physical_reasoning.json

   • 内容：Double-checked physical reasoning questions based on the natural world
   • 条目数量：500

2. physical_reasoning_longer.json

   • 内容：Slightly longer Q&A
   • 条目数量：149

3. physical_reasoning_magic.json

   • 内容：Same, but assigns magical properties to the world and tests the resulting reasoning
   • 条目数量：250

数据集内容类型

• 问题类型包括：
  • 视线问题（谁/什么在各种情况下从哪里可见）
  • 温度相关问题
  • 压力相关问题
  • 重力效应等

数据集处理

• 由gpt-4-1106-preview生成并双重检查
• 可疑答案已被移除，以提高准确性

搜集汇总

背景与挑战

背景概述

该数据集是一个物理推理问答数据集，包含899条JSON格式的问答对，由GPT-4生成并经过双重检查，涵盖视线、温度、压力和重力等多种物理现象。数据集分为三个文件，分别针对不同长度和类型的物理推理问题。