five

Nemotron-Terminal-Corpus

收藏
Hugging Face2026-02-24 更新2026-02-26 收录
下载链接:
https://huggingface.co/datasets/nvidia/Nemotron-Terminal-Corpus
下载链接
链接失效反馈
官方服务:
资源简介:
Terminal-Corpus 是一个大规模监督微调(SFT)数据集,专为提升大型语言模型(LLM)的终端交互能力而设计。该数据集由 NVIDIA 开发,采用 Terminal-Task-Gen 流程构建,结合了数据集适配和跨多个领域的合成任务生成。数据集包含约 366,000 条高质量执行轨迹,分为两大类别:数据集适配器(约 226,000 样本),将高质量的数学、代码和软件工程数据集转换为基于终端的格式;以及基于技能的合成任务(约 140,000 样本),从结构化终端技能分类中生成的新任务。实验结果表明,使用该数据集训练的模型在 Terminal-Bench 2.0 基准测试中表现优异,显著优于基础模型,并在复杂领域实现了功能性的突破。数据集适用于问答任务,主要语言为英语,采用 cc-by-4.0 许可。

Terminal-Corpus is a large-scale supervised fine-tuning (SFT) dataset specifically designed to enhance the terminal interaction capabilities of Large Language Models (LLMs). Developed by NVIDIA, this dataset is constructed using the Terminal-Task-Gen pipeline, which combines dataset adaptation and cross-domain synthetic task generation. It contains approximately 366,000 high-quality execution traces, divided into two main categories: Dataset Adapter (around 226,000 samples), which converts high-quality mathematical, code, and software engineering datasets into terminal-based formats; and Skill-based Synthetic Tasks (around 140,000 samples), which are new tasks generated from structured terminal skill taxonomies. Experimental results demonstrate that models trained on this dataset achieve excellent performance on the Terminal-Bench 2.0 benchmark, significantly outperforming baseline models and delivering functional breakthroughs in complex domains. This dataset is applicable to question answering tasks, primarily in English, and is licensed under CC-BY-4.0.
提供机构:
NVIDIA
创建时间:
2026-02-19
搜集汇总
数据集介绍
构建方式
在终端智能体研究领域,数据质量与多样性是模型性能提升的关键。Nemotron-Terminal-Corpus的构建采用了创新的Terminal-Task-Gen流程,该流程融合了数据集适配与合成任务生成两大策略。一方面,通过将高质量的数学、代码及软件工程数据集转化为基于终端的交互轨迹,形成了约22.6万条适配样本;另一方面,基于一套结构化的终端基础技能分类体系,生成了约14万条新颖的合成任务样本。这种双轨并行的构建方式,确保了数据在覆盖广度与技能深度上的均衡,为模型提供了丰富且高质量的学习素材。
使用方法
对于致力于终端智能体开发的研究者与工程师而言,该数据集提供了清晰的实践路径。数据集在HuggingFace平台上以多个配置发布,用户可根据需求选择‘dataset_adapters’或不同难度级别的‘skill_based’子集进行加载与使用。其主要用途是作为监督微调的数据源,以显著增强各类规模语言模型理解并执行终端命令、完成复杂工作流的能力。通过调用相应的数据文件,研究者可以便捷地将其整合至训练流程中,从而复现或超越论文中报告的性能突破,推动终端自动化与智能辅助工具的进一步发展。
背景与挑战
背景概述
在人工智能与自然语言处理领域,赋予大型语言模型与计算机终端进行交互的能力,是迈向通用人工智能的关键一步。Nemotron-Terminal-Corpus数据集由NVIDIA研究团队于2026年创建,旨在通过大规模监督微调数据,系统性地提升模型在终端环境下的任务执行能力。该数据集的核心研究聚焦于解决模型在复杂、动态的终端操作场景中理解与执行指令的瓶颈,其构建融合了高质量数据集适配与基于技能分类的合成任务生成。作为终端智能体研究的重要基础设施,该数据集显著推动了模型在数据查询、模型训练、软件工程等专业领域的实用性,为后续的终端基准测试与能力评估设立了新的标杆。
当前挑战
该数据集致力于解决终端交互这一新兴领域的核心挑战,即如何使语言模型超越文本生成,在真实的命令行环境中准确理解多步指令、处理动态反馈并执行复杂操作。构建过程中的主要挑战在于高质量轨迹数据的获取与合成。一方面,需要将现有的数学、代码等结构化数据集,转化为符合终端交互逻辑的序列格式,这涉及对原始任务语义的精准映射与执行环境的仿真。另一方面,创造覆盖广泛终端基础技能的合成任务,要求设计一个系统化的技能分类体系,并确保生成的任务既具多样性,又能反映真实场景的复杂性,从而保证数据在规模与质量上的平衡。
常用场景
经典使用场景
在自然语言处理与代码智能交叉领域,Nemotron-Terminal-Corpus数据集为训练大型语言模型在终端环境中的交互能力提供了核心资源。其经典使用场景集中于监督微调过程,通过整合高质量的执行轨迹数据,使模型能够理解和执行复杂的终端命令序列。这些轨迹覆盖了从数学推理到软件工程的多领域任务,为模型提供了丰富的上下文学习样本,从而显著提升了其在终端操作任务上的泛化性能与准确性。
解决学术问题
该数据集有效解决了大型语言模型在终端交互场景中能力不足的学术研究问题。传统模型往往在数据查询、模型训练、数据处理等复杂领域表现接近零能力,而Nemotron-Terminal-Corpus通过大规模高质量轨迹数据,填补了这一能力鸿沟。其意义在于验证了数据工程在扩展模型功能边界方面的关键作用,为如何通过结构化数据生成提升模型在特定领域的实用性提供了实证基础,推动了代码智能与终端自动化研究的发展。
实际应用
在实际应用层面,该数据集支撑了智能终端助手与自动化运维工具的开发。基于其训练的模型能够理解自然语言指令并转化为准确的终端操作,例如执行数据查询、调试代码、管理软件工程流程等。这显著降低了非专业用户使用命令行工具的门槛,提升了开发效率与系统管理自动化水平,为云计算、DevOps以及科研计算环境提供了可靠的人机交互解决方案。
数据集最近研究
最新研究方向
在代码生成与终端交互领域,Nemotron-Terminal-Corpus的推出标志着数据工程在提升大型语言模型实际应用能力方面的前沿探索。该数据集通过结合高质量数学、代码及软件工程数据的适配转换与基于技能分类的合成任务生成,为模型在终端环境下的复杂操作提供了精细化的监督微调样本。当前研究聚焦于利用此类结构化轨迹数据,突破模型在数据查询、模型训练及调试等专业场景中的能力瓶颈,推动小型化模型在终端基准测试上超越前沿大模型的性能表现,这为高效、可部署的智能体系统开发奠定了新的数据基础。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务