协鑫智慧能源数据中心建设方案

2017-06-21夏茂龙江苏省广播电视科学研究所有限公司

视听界(广播电视技术) 2017年3期

关键词：协鑫历史数据开发商

夏茂龙江苏省广播电视科学研究所有限公司

协鑫智慧能源数据中心建设方案

夏茂龙江苏省广播电视科学研究所有限公司

本文介绍了协鑫智慧能源数据中心建设目标、总体框架、建设步骤、物理部署架构。

数据接入数据整合数据应用

1. 协鑫智慧能源数据中心建设目标

协鑫智慧能源数据中心建设目标遵循以下要点:

（1）以指标为核心进行相关数据梳理、整合

（2）以业务逻辑关系为基础进行数据存储

（3）以业务应用为导向进行数据展现

2. 协鑫智慧能源数据中心总体框架

协鑫智慧能源数据中心总体框架如图1所示。

3. 协鑫智慧能源数据中心建设步骤

3.1 数据接入

3.1.1 接入方式

由数据平台开发商提出数据要求，业务系统开发商提供webservice服务，由数据平台开发商进行解析。业务系统开发商需要提供完整的webservice服务说明文档，必要时需要指派专人配合数据平台开发商开发解析程序。

由业务系统开发商为数据平台开发实施商提供原业务系统数据库只读帐号、完整数据字典，由数据平台开发商直接从业务系统数据库中通过PowerCenter工具抽取相应数据。

在ETL抽取过程中，根据存储区各域模型的规范要求进行数据的清洗、转化，在不修改原始数据的情况下加载存储到ODS存储区的各大数据域中。为了尽可能不对业务系统造成影响，ETL过程普遍采用增量方式抽取。

3.1.2 指标梳理流程

以公司生产运行和经营管理关键指标、同业对标、月度例会等指标为切入点，开展指标数据梳理，理清数据来源、口径等，从明细、口径、频度、流程四方面来提升数据质量，支持分析展现，形成数据质量提升长效机制。具体流程如图2所示。

3.1.3 指标梳理效果

指标梳理效果见图3。

图1 协鑫智慧能源数据中心总体框架

图2 指标梳理流程

图3 指标梳理效果

3.1.4 线下数据采集

图4 线下数据采集

3.1.5 历史数据初始化

历史数据接入方式根据系统支撑情况，可以通过多种方式，实现历史数据的接入。以下列举三种方式，其中当数据量较大时，建议不通过接口接入。历史数据的三种接入方式见图5。

3.2 数据整合

3.2.1 数据分布

数据架构通过划分数据层次和分区，为每类数据提供独立的存储环境。

图5 历史数据接入方式

3.2.2 缓冲层包含的内容、用途及设计原则

（1）缓冲层包含的内容

根据源系统数据调研获取数据实体，并结合业务应用需求进行范围确定。主要包括： NC、PM、微电源、充电桩、新能源等系统的数据。

（2）缓冲层主要用途

建立数据缓冲区，临时存放从源系统抽取过来的增量及全量数据。

（3）缓冲层设计原则

a.分区设计原则

综上所述，产品研发首先要了解客户、市场及其需求，这是新产品开发的关键的第一步。然后进行市场分析和细分，确保新产品开发瞄准最有价值的市场机会，还要将客户需求融入新产品和服务的设计和开发中，找出独特的信息以使自己的产品与其他产品区分开来，不仅有利于创新活动，也增加了新产品成功面世的机会，作为新产品研发的输入。新产品的创意设计是最为重要的一个环节，新产品构思和概念产生一般需要关键人群（公司或用户）的专业知识和经验，以及相关调查报告的数据信息进行创意生成，并且根据一定的选择方法进行创意筛选，然后对新产品方案进行可行性评估，最后进行生产并投放市场。

按业务系统划分数据区，不同系统间彼此间隔；b.模型设计原则

逻辑模型参考接口规范定义，为每一个接口单元设计实体、属性，物理模型与逻辑模型保持一致；c.历史保留原则

保留最aokuo新业务周期的数据，不保留历史数据。

3.3 数据应用

3.3.1 数据应用方式

数据应用方式包括：

（1）大屏可视化

（2）Web展现

（3）公共模型及数据字典

（4）后续系统的交换服务

3.3.2 数据应用内容

数据应用内容如下：