遇见数据集

NSE India Multi-Timeframe TL Data in Parquet

收藏
github2026-08-05 更新2026-08-07 收录
官方服务:

资源简介:

一个开放、可查询的NSE印度每日OHLCV和多时间框架TL数据集,按每个符号组织为一个Parquet文件。每个本地文件将每日市场蜡烛图与每日、每周、每月和每季度的TL值(包括标准和OHLC衍生形式)相结合。

An open and queryable dataset of daily OHLCV and multi-timeframe TL data for NSE India, organized per trading symbol into individual Parquet files. Each local file combines daily market candlestick data with daily, weekly, monthly, and quarterly TL values, including both standard and OHLC-derived forms.

创建时间:
2026-08-02
原始信息汇总

数据集概述

该数据集为印度国家证券交易所(NSE)多周期技术水平(TL)数据,以 Parquet 格式存储,按股票代码分区组织,每个合格股票对应一个 tl.parquet 文件。

核心内容

  • 日线 OHLCV 数据:包含每日开盘、最高、最低、收盘价及成交量,用于图表绘制与数据验证。
  • 多周期技术水平(TL)值:覆盖日线、周线、月线和季线四个周期,并提供标准形式与基于 OHLC 输入推导的并行 *_tl_ohlc 形式。
  • 符号分区存储:按股票代码分目录存放,便于单标的快速读取。
  • 数据导出工具:支持从 Citus/PostgreSQL 增量或全量导出至 Parquet,并包含离线验证功能。
  • 本地查看器:仓库内置 OLO DB Viewer,仅读取本仓库 database/ 目录下的数据,用于技术水平的图表叠加展示。

数据模式

每个 tl.parquet 文件包含14列:

  • 8个技术水平列:daily_tldaily_tl_ohlcweekly_tlweekly_tl_ohlcmonthly_tlmonthly_tl_ohlcquarterly_tlquarterly_tl_ohlc
  • 5个日线行情列:daily_opendaily_highdaily_lowdaily_closedaily_volume
  • 1个时间戳列:candle_datetime(TIMESTAMP类型)

8个TL/OHLC列与5个日线列为DOUBLE类型。该数据集不包含交付数量或交付百分比列,不应从 daily_volume 推断交付统计数据。物理行序不保证,查询时应使用 ORDER BY candle_datetime

适用场景

适用于技术研究、图表叠加、股票筛选、DuckDB与pandas分析、回测输入、数据工程、机器学习及可复现的教学示例。

重要声明

  • 这是独立社区项目,与印度国家证券交易所无任何关联、背书或运营关系。
  • 数据集仅用于研究与教育目的,不构成投资建议。
  • 生产使用前需自行验证数据、指标解释及来源权利。

文档资源

仓库提供了完整文档索引,包括文件结构说明、精确的14列数据字典、快速入门(DuckDB/Python/Pandas/Polars示例)、数据质量验证SQL与限制说明、FAQ、机器可读的LLM索引、Schema.org JSON-LD数据集元数据、Parquet列契约及引用元数据等。

搜集汇总
数据集介绍
NSE India Multi-Timeframe TL Data in Parquet 数据集图片
构建方式
该数据集针对印度国家证券交易所(NSE)上市股票,以Parquet格式存储,每个证券对应一个独立的`tl.parquet`文件。构建流程依托于Citus/PostgreSQL数据库,通过流式导出工具将这些数据库中的市场数据与多时间框架技术水平(TL)值整合至Parquet列式存储中。每个文件包含日线OHLCV数据及日、周、月、季四个时间维度的TL值(标准与OHLC衍生两种形态),共计14列,其中`candle_datetime`为时间戳类型,其余为双精度浮点数。导出工具支持全量与增量模式,利用`candle_datetime`作为水位线,先写临时文件,验证后原子替换,确保数据完整性。此外,仓库附带了OLO DB Viewer桌面工具,便于本地可视化与校验。
使用方法
使用者可通过DuckDB SQL直接查询单个标的的Parquet文件,例如`SELECT * FROM read_parquet('database/r/RELIANCE/tl.parquet') ORDER BY candle_datetime;`,或利用Python库加载为DataFrame进行后续分析。Windows用户可运行`olo-db-viewer.bat`启动图形界面,查看各时间框架的TL值叠加图。仓库还提供了`create.bat`和`incremental.bat`脚本,分别用于全量重建和增量更新本地数据,并通过`scripts/run.ps1 -VerifyOnly`进行离线验证。建议消费者始终按`candle_datetime`排序,以应对物理行序不固定的情况。详细操作示例与高级用法参见文档索引中的QUICKSTART指南。
背景与挑战
背景概述
随着印度国家证券交易所(NSE)作为全球重要新兴金融市场的地位日益凸显,其股票市场的技术分析研究对量化投资与算法交易具有关键意义。为满足多周期技术位(TL)数据分析的需求,该社区驱动的独立项目于近年应运而生,由数据工程师与金融量化研究人员共同维护,核心关注点为提供按股票划分的日线OHLCV数据及日、周、月、季四个时间周期的技术位数值,并以高效列式存储格式Parquet组织。此数据集旨在桥接原始行情与多周期衍生指标之间的鸿沟,为技术分析、策略回测、机器学习及教育复现提供标准化数据基础。其发布填补了NSE多周期TL数据在开放获取方面的空白,影响力已辐射至本地金融数据科研与工程实践,成为相关领域的重要参考资源。
当前挑战
该数据集面临的挑战多维且具体。在领域层面,NSE股票市场的技术分析长期受制于多周期数据获取的碎片化与指标计算口径不一致,传统数据源往往仅提供单一周期或缺乏标准化TL衍生值,难以支撑跨周期共振分析及稳健的回测研究,此数据集致力于整合日、周、月、季四周期TL数据,但如何在数据异构性与市场微观结构变化中保持指标有效性仍是一大难题。在构建层面,数据获取依赖Citus/PostgreSQL的增量导出,需处理大量股票的流式处理、临时文件校验与原子替换,以确保数据完整性;同时,缺失交付量列可能引发对成交量数据的误读,物理行序的不确定性要求用户必须显式排序,而数据质量验证方法及外部源数据权利归属亦需持续审慎管理,这些均构成工程与治理上的实际挑战。
常用场景
经典使用场景
该数据集以Parquet格式存储印度国家证券交易所(NSE)个股的日频OHLCV行情及多周期技术水平(TL)数据,涵盖日、周、月、季四个时间框架,并同时提供标准与OHLC衍生两种计算形态。其经典使用场景聚焦于量化研究与技术分析,研究者可借助DuckDB或pandas等工具进行高效的数据检索与处理,从而支撑策略回测、图表叠加、市场筛选及机器学习模型的因子构建。该数据集的分区存储结构显著优化了单标的读取性能,为多标的横向比较与纵向时序分析提供了便捷、统一的数据基础,尤其适用于探索印度股市价格行为与技术指标间关联的实证研究。
解决学术问题
该数据集直面印度股市研究中多周期技术指标数据获取困难、格式异构及计算口径不统一等痼疾,通过标准化架构将日频行情与多周期TL值整合于同一存储介质,有效消解了数据清洗与对齐的繁琐流程。其高精度的OHLCV数据与分层技术水平为检验支撑阻力理论、波动率聚集效应及多周期交互作用等学术假说提供了可靠素材。这一开源资源显著降低了技术分析实证研究的准入门槛,促进了印度金融市场微观结构研究的可复现性,并为跨市场比较分析奠定了坚实的数据基础设施。
实际应用
在实际应用中,该数据集是构建自动化交易决策支持系统的得力助手。量化投资机构可将其无缝集成至DuckDB、pandas或Polars构建的数据管道中,快速生成技术指标信号,用于智能选股、风险预警及投资组合的战术性调仓。同时,该数据集为金融数据终端的功能扩展提供了便捷的数据源,支持图表叠加与技术形态的自动识别。对于金融科技开发者而言,它可作为算法交易回测环境的标准化输入,加速策略迭代与稳健性验证,但需注意其仅用于研究与教育目的,不构成投资建议。
数据集最近研究
最新研究方向
该数据集聚焦于印度国家证券交易所(NSE)多时间框架技术水平(TL)数据的结构化存储与高效查询,采用Parquet列式格式,按股票代码分区,为量化金融研究提供了标准化、机器可读的基础设施。当前前沿方向包括:利用DuckDB和pandas进行多周期技术指标的融合分析,探索日线、周线、月线及季度线TL值在支撑阻力位识别中的协同效应;结合OHLC衍生TL值,构建机器学习模型以预测价格突破或趋势反转;通过增量导出工具与Citus/PostgreSQL的无缝集成,支持大规模回测与实时数据管道搭建。该数据集填补了印度股市标准化TL数据公开资源的空白,为跨市场比较、算法交易策略开发及金融教育提供了可复现的数据基石,其独立社区项目的属性也促进了数据质量验证与开源协作的新模式。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务