Competency Questions (CQs)

该数据集包含了95个精心挑选的竞争力问题，旨在测试模型在六个不同领域内的本体工程推理能力。此外，该数据集被用于评估两个大型语言模型——DeepSeek和OpenAI的o1-preview版——在从竞争力问题生成本体方面的表现。规模上，数据集包含了95个竞争力问题，任务则是基于这些问题进行本体生成。This dataset comprises 95 carefully selected competitive problems, intended to evaluate models' ontological engineering reasoning capabilities across six distinct domains. Additionally, this dataset is employed to assess the performance of two large language models—DeepSeek and OpenAI o1-preview—on ontology generation derived from these competitive problems. Regarding the dataset's scale, it includes 95 competitive problems, with the core task being ontology generation based on these problems.

搜集汇总

背景与挑战

背景概述

该数据集是用于评估大语言模型生成领域特定本体能力的资源集合，包含能力问题（CQs）、本体故事（stories）以及LLM生成的本体示例。数据集提供了一个标准化的提示模板和示例，旨在支持研究如何基于自然语言需求自动构建本体。