CogniSQL Reasoning Traces & Positive Sample Corpus
收藏arXiv2025-07-08 更新2025-07-10 收录
下载链接:
https://huggingface.co/datasets/CogniSQL/Reasoning_Traces, https://huggingface.co/datasets/CogniSQL/Positive_Sample_Corpus
下载链接
链接失效反馈官方服务:
资源简介:
CogniSQL Reasoning Traces数据集包含5,024个推理轨迹,每个轨迹具有不同的上下文长度,用于研究和训练高效的文本到SQL生成模型。Positive Sample Corpus数据集包含36,356个弱监督查询的正样本语料库,每个查询都标注了六条语义上不同的推理路径。这些数据集由Dell Technologies的研究人员创建,旨在支持可扩展和可解释的文本到SQL生成研究。数据集的大小和多样性为模型训练提供了丰富的资源,同时,数据集的创建过程考虑了执行正确性和格式标签合规性,以确保生成的SQL查询的准确性和可执行性。这些数据集的应用领域主要在于自然语言处理和结构化数据访问,旨在解决将自然语言问题转换为可执行的SQL查询的挑战。
The CogniSQL Reasoning Traces dataset contains 5,024 reasoning traces with varying context lengths, designed for researching and training efficient text-to-SQL generation models. The Positive Sample Corpus dataset comprises 36,356 positive sample corpora for weakly supervised queries, where each query is annotated with six semantically distinct reasoning paths. These datasets were created by researchers at Dell Technologies to support scalable and interpretable text-to-SQL generation research. The size and diversity of the datasets offer abundant resources for model training, and their development process takes execution correctness and format label compliance into consideration to ensure the accuracy and executability of the generated SQL queries. The primary application fields of these datasets cover natural language processing and structured data access, with the goal of addressing the challenge of converting natural language questions into executable SQL queries.
提供机构:
Dell Technologies
创建时间:
2025-07-08
搜集汇总
数据集介绍

构建方式
CogniSQL Reasoning Traces & Positive Sample Corpus数据集的构建基于BIRD-SQL数据集,通过强化学习框架CogniSQL-R1-Zero生成。具体而言,研究人员利用Qwen-7B-Coder模型在温度参数0.9下对9,428个BIRD-SQL训练提示进行多次采样,生成候选SQL查询,并通过执行验证筛选出36,356个正确样本。同时,采用32B参数的QWQ模型生成5,024条带有逐步推理痕迹的样本,最终形成包含多样化推理路径的高质量语料库。整个构建过程注重执行正确性和格式规范性,采用DeepSpeed ZeRO 2技术实现四块NVIDIA A100 GPU的高效并行训练。
特点
该数据集的核心特点体现在其强化学习驱动的生成方式和丰富的语义标注。所有SQL样本均通过实际数据库执行验证,确保语义正确性;每个查询配备六种不同推理路径,增强模型的泛化能力。推理痕迹数据集采用结构化标签⟨reasoning⟩和⟨answer⟩明确区分逻辑推导与最终答案,为研究可解释的Text-to-SQL提供透明化训练素材。数据分布覆盖95个数据库和37个领域,包含从简单查询到复杂多表连接的完整谱系,特别强化了对嵌套子查询和业务场景的覆盖。
使用方法
该数据集支持多种前沿研究场景。基于强化学习的模型可直接利用执行正确的样本进行策略优化,通过GRPO算法实现端到端训练。推理痕迹数据适用于思维链微调,可提升模型的分步推理能力。实践建议采用温度采样策略生成多个候选查询,通过多数投票机制提升最终执行准确率。对于资源受限环境,推荐结合Parameter-Efficient Fine-Tuning技术,在保持性能的同时显著降低计算开销。数据集的格式标签设计支持即插即用的提示工程,便于集成到现有Text-to-SQL pipeline中。
背景与挑战
背景概述
CogniSQL Reasoning Traces & Positive Sample Corpus是由Dell Technologies和UT Austin的研究团队于2025年创建的文本到SQL转换领域的重要数据集。该数据集旨在解决自然语言处理与结构化数据库查询之间的核心挑战,即如何准确地将自然语言问题转换为可执行的SQL查询。研究团队通过引入强化学习框架CogniSQL-R1-Zero,成功地在轻量级计算资源下实现了高效的SQL生成。该数据集的发布为文本到SQL领域的研究提供了宝贵的资源,推动了该领域的技术进步。
当前挑战
CogniSQL数据集面临的挑战主要包括两个方面:领域问题的挑战和构建过程的挑战。在领域问题方面,数据集需要解决自然语言到SQL转换中的语义歧义、复杂数据库模式的理解以及生成查询的执行正确性等核心难题。在构建过程中,研究团队需克服高质量标注数据的稀缺性、强化学习训练的不稳定性以及大规模数据处理的效率问题。此外,如何在不依赖复杂中间监督的情况下,仅通过执行正确性和格式合规性来指导模型学习,也是构建过程中的关键挑战。
常用场景
经典使用场景
CogniSQL Reasoning Traces & Positive Sample Corpus数据集在自然语言处理与数据库查询的交叉领域中具有重要应用。该数据集主要用于训练和评估文本到SQL(Text-to-SQL)生成模型,特别是在复杂查询生成任务中。通过提供丰富的推理路径和高质量的正样本,该数据集能够帮助模型学习如何将自然语言问题转化为可执行的SQL查询,从而提升模型在真实数据库环境中的表现。
解决学术问题
该数据集解决了文本到SQL生成中的多个关键学术问题,包括自然语言理解的歧义性、复杂数据库模式的处理以及生成查询的执行正确性。通过引入强化学习框架和轻量级奖励信号,该数据集显著提升了模型在复杂查询任务中的性能,避免了传统方法中常见的中间监督和复杂奖励设计问题。此外,该数据集还支持跨领域和低资源环境下的模型训练,为相关研究提供了重要的数据基础。
衍生相关工作
该数据集衍生了一系列经典研究工作,包括基于强化学习的文本到SQL生成模型(如CogniSQL-R1-Zero)和轻量级推理框架的开发。相关研究还探索了多模态提示设计、执行反馈优化以及模型蒸馏等技术,进一步推动了文本到SQL领域的发展。这些工作不仅在学术上取得了显著成果,也为工业界的实际应用提供了有力支持。
以上内容由遇见数据集搜集并总结生成



