遵义市矿产品交易服务平台系统数据资源

数据加工
数据清洗：重点处理异常值、缺失值与重复数据问题。一是异常值校验
，对超出车辆核定载重的过磅数据、运单状态与时间逻辑冲突的数据、
超出合理范围的交易价格数据，结合设备运行日志、业务操作记录进行
核验，剔除无效异常数据；二是缺失值补全，对运单、交收单中缺失的
矿种信息、企业信息、车辆信息，通过关联对应主表的维度数据进行补
全；三是重复数据去重，删除因系统重复上报产生的重复运单、重复交
收单数据，对作废票据、取消订单做统一标记处理，保障数据质量。
数据整合：将分散在各业务模块、各数据表中的孤立数据按照业务逻辑
进行关联融合。例如将运单数据关联对应的司机信息、车辆信息、货主
信息、供需企业信息、装卸货地址信息，将交收单数据关联对应的运单
数据、计量站信息、票据信息、税费核算信息，将库存出入库数据关联
对应的运单、交收单与供需企业数据，将企业数据关联对应的资质认证
、合规监管数据，最终形成覆盖矿产品交易全链路的统一数据集，打通
各业务环节的数据壁垒。
指标计算：基于清洗整合后的全量数据计算各类核心运营与监管指标。
按矿种维度统计交易量、交易额、平均交易价格、运输总量；按企业

搜集汇总

背景与挑战

背景概述

该数据集由遵义能汇矿产交易有限公司提供，涵盖订单、货物、运输、质检、税务等全产业链数据，规模约7.4GB，每日更新。数据经过清洗与整合处理，支持安全、环保、税务等多部门协同监管及市场交易、物流优化等场景分析，并采用加密脱敏与三重权限控制保障数据安全。