MetroInsightDataset

本仓库包含用于MetroInsight项目的数据集。每个数据集在./data中包含数据，在./metadata中包含元数据。数据集包括BuildingDepot、ION Dataset、Google Traffic等，分别涉及建筑传感器数据、能源消耗数据和交通数据等。

This repository contains datasets for the MetroInsight project. Each dataset includes data in the ./data directory and metadata in the ./metadata directory. The datasets encompass BuildingDepot, ION Dataset, Google Traffic, among others, covering building sensor data, energy consumption data, and traffic data, respectively.

原始信息汇总

数据集概述

数据集列表

数据源	数据点数量	粒度	备注
BuildingDepot	7296	2分钟	5栋建筑
ION Dataset	955	2分钟
Google Traffic	10	10分钟	5条路线

• 数据周期：2017年1月18日至2017年1月25日

数据集详细信息

BuildingDepot

• 包含建筑传感器数据。
• 元数据位于raw_data/buildingdepot/metadata，包括建筑信息，特别是位置信息。

ION Dataset

• 包含多栋建筑的能源消耗数据，包括电力和热水循环中的热能。
• 元数据位于raw_data/ion_data/metadata/ion_metadata.csv，但目前不可机器读取，需进一步解析。

Google Traffic

• 数据收集自Google Travel Time API，监测UCSD校园内的几条路线。
• 路线元数据位于raw_data/google_traffic/metadata/routes_metadata.json。

Mesowest Weather Data

• 包含通过Mesowest / SynopticLabs API收集的天气传感器数据。
• 元数据包含每个传感器的详细信息和收集的指标，存储为数据目录中的每个传感器的csv文件。

Wifier数据

• 包含MesoWest、NWS Digital Forecast和HRRRX Forecast的数据。

搜集汇总

数据集介绍

构建方式

.MetroInsightDataset数据集是针对城市洞察项目而构建的，其构建方式涉及多个数据源，包括建筑传感器、交通流量、天气预报等。数据集包含不同时间粒度的数据点，时间跨度为2017年1月18日至1月25日，数据采集频率从每2分钟到10分钟不等。数据以文件形式存储，其中 metadata 文件夹包含与各数据源相关的元数据信息，如建筑位置、传感器指标等。

使用方法

使用该数据集，首先需要安装citadel-python-client库以访问数据。数据集的目录结构清晰，用户可以通过访问不同文件夹下的数据文件和元数据文件来获取所需信息。对于开发者而言，可以使用提供的上传脚本 *_citadel_dump_uploader.py 和实时数据连接脚本 *_citadel_connector.py 来处理数据。需要注意的是，部分元数据文件为CSV格式，可能需要进一步处理以方便分析。

背景与挑战

背景概述

.MetroInsightDataset数据集是MetroInsight项目的核心组成部分，旨在通过收集和分析建筑物、交通、天气等多种来源的数据，深入探究城市运行机理。该数据集由多个机构和研究人员合作创建于2017年，其数据覆盖期为2017年1月18日至1月25日。数据集涵盖了建筑物传感器、能源消耗、交通流量和气象信息等多个维度，为城市科学、智能交通和建筑能效等研究领域提供了宝贵的实证资料。

当前挑战

在数据集构建和应用过程中，研究团队面临了多方面的挑战。首先，在保证隐私安全的前提下，如何有效管理和分享数据是一个重大挑战，例如README中提到数据因隐私问题不直接公开，需联系负责人获取。其次，数据集包含了多种类型的数据，如何整合不同来源和格式的数据，保证数据质量和一致性，是构建过程中的另一挑战。此外，数据集在解决城市运行分析问题的同时，还需应对如何支持复杂模型的训练和验证，以及如何适应不断变化的都市环境等长期挑战。

常用场景

经典使用场景

在智慧城市研究领域，MetroInsightDataset数据集被广泛用于分析城市基础设施的运行状态。该数据集包含建筑传感器、能源消耗以及交通流量等数据，其经典使用场景在于对城市运行状态的实时监测与历史趋势分析，进而辅助决策者制定更为高效的城市管理策略。

解决学术问题

该数据集解决了智慧城市研究中数据获取不全面、实时性不足的问题，提供了细致到分钟级的数据粒度，有助于研究者深入理解城市运行规律，发现潜在问题并提出解决方案，对提升城市管理的智能化水平具有重要意义。

实际应用

在实际应用中，MetroInsightDataset数据集可用于城市规划、交通管理和能源管理等多个方面。例如，通过对交通流量数据的分析，可以有效规划交通路线，减少拥堵；对建筑能源消耗的分析，有助于提高能源使用效率。

数据集最近研究

最新研究方向

在智慧城市与建筑能效研究领域，MetroInsightDataset数据集以其细致的数据粒度和多元的数据来源，成为学者和工程师深入探索城市运行机制与能效优化的重要资源。近期，该数据集在建筑能耗分析、交通流量预测以及环境监测等方面的应用研究取得了显著进展，不仅助力于提升建筑自动化系统的智能水平，也为城市交通规划与环境保护提供了科学依据。研究者们利用该数据集，结合机器学习和深度学习技术，正致力于发掘城市大数据中的价值，以推动建筑与城市运行的可持续发展。