【IT168 案例】
价值点评:国家电网SG186数据中心案例是一个关于如何将“数据孤岛”集中整合的典型。对于需要建立集中化的数据中心,解决信息孤岛问题的政府企业来讲,该案例通过在国家电网的实效应用,为类似的分布式架构企业提供了有效证明和借鉴。
国家电网公司是中国经营输电、变电、配电等电网资产的国有特大型企业集团,是关系国家能源安全和国民经济命脉的国有重要骨干企业。国家电网公司以建设运营电网为核心业务,承担着为经济社会发展提供坚强电力保障的基本使命。公司经营区域覆盖26个省、自治区、直辖市,覆盖国土面积的88%以上,直接服务客户1.45亿户,供电人口超过10亿。
应用场景描述:数据“孤岛”亟待统一
为了迎接新形势下电力改革与发展的挑战,国家电网公司确立了“十一五”信息建设目标,并全面启动了信息化建设重大工程——“SG186”工程。其中,国家电网公司的数据中心系统建设成为“SG186”工程的重要任务。
面对新形式下电力改革的挑战,以及自身未来发展的需要,国家电网的综合查询、业务分析等系统已无法满足管理层从企业全局出发,对企业各个业务条线进行跨业务、多角度、多层次的综合分析需求。因此,国家电网迫切需要建设数据中心系统,将原来分散、孤立的数据资源集中存储、统一管理,建立完善、统一的报表与指标体系规范,有效改善指标多人维护、多重上报的问题,为各应用系统提供数据层集中服务的数据环境,达到提升企业管理水平和竞争力的战略目标。
国家电网公司数据中心的建设目标是:
1.建立整体数据模型,实现统一信息资源层次体系、统一数据元素标准和统一信息编码。通过对数据的规范化定义,实现数据的唯一性、准确性、完整性、规范性和时效性,实现数据的共享共用,解决数据层面的信息孤岛问题。
2.进行数据存储管理的集中优化整合,对现有各类应用系统的数据库进行集中整合,对相关应用系统数据库进行迁移,将现有分散管理的数据库迁移到集中的企业及数据库管理系统平台上。
3.建立数据仓库,为管理决策层提供有效的数据服务。
4.实现联机分析处理,为公司各级领导提供灵活自由的数据查询和报表生成手段;通过对数据的分析和挖掘,对电力生产经营过程中的相关问题提供辅助决策支持。
5.制定信息资源的建设和管理标准,规范各个业务系统的建设。
案例技术细节:三层架构消除“信息孤岛”
通过分析国家电网公司的数据中心建设需求和目标,国家电网数据中心的建设必须遵循以下原则和完成相应工作:
1.统一规划数据应用分析:从公司领导层的角度出发对国网公司数据应用工作进行统一规划,提升业务人员对于数据应用分析的理解,推动业务数据应用需求的提出;
2.企业级报表和指标体系规范:梳理国网公司数据应用分析工作,明确各业务部门在分析应用中的职责,实现企业运行指标分析的统一口径;
3.设计数据架构:帮助梳理和规划统一的业务数据分布、移动与整合架构;
4.企业概念模型:根据业务分类获得数据主题域,并明确之间的业务关系,从而在数据层次得到对国网公司业务的逻辑描述;
5.实现企业级数据整合与存储:为业务用户提供基于数据主题域、涉及全业务的统一信息视图(如客户视图、产品视图、设备视图等);
6.建立完善的数据应用分析:建设数据集市,部署专业商业智能系统,为业务人员提供包括报表、查询、在线分析和知识发现在内的数据分析应用能力;
7.建立数据管理体系:明确关键绩效指标(KPI)以及相关责任人,实现企业数据的 “唯一事实”;
8.建立企业级元数据管理机制:建立业务与技术元数据管理机制,使得国网各个业务部门间形成对业务与技术术语的一致理解。
根据以上原则,国家电网公司最终选择如下数据中心解决方案。该解决方案在结构上分为数据获取层、数据存储层和数据访问层三层架构方式。其中数据获取层又分为数据来源、抽取、清洗/转换/加载三个子层;数据访问层又分为展示方式和分析人员两个子层。
其中,数据获取层主要完成的是从业务系统中将相关业务数据进行抽取(Extract)、转换(Transfer)并加载(Load)到数据仓库中,在数据仓库中形成基础的分析数据的功能。
数据存储层是该解决方案的核心,是企业级数据存储、数据及时加载和信息快速、灵活展现的保证。而且,业务部门可以根据自身管理、业务的需要在数据仓库上建立适合自身应用的数据集市。
数据访问层使用户可以通过Web浏览器访问门户,以报表、OLAP分析、即席查询、数据挖掘等形式向系统使用人员进行展现。
作为该解决方案的核心,分析型数据仓库引擎Sybase IQ为企业级数据存储、数据及时加载和信息快速灵活展现提供了保证,凭借其高效的数据压缩能力、查询优化技术,彻底改变国家电网公司以往“信息孤岛”的数据处理格局。
区别于传统的行式存储,Sybase IQ采用列式存储技术,以很小的磁盘I/O得到查询结果。由于数据按列存储的方式,而获得更加显著的数据压缩性能,可将数据结果压缩至传统RDBMS方式的1/3至1/7。正是基于其,该解决方案为国家电网公司提供了统一的、全面的信息展示,囊括所有主流业务系统的明细信息,充分满足国家电网数据中心海量数据存储要求。
由于Sybase IQ从下到上都是为分析而构建,不需要为分析优化而在数据库上花费大量工作,所以,该解决方案的部署时间减少多达80%,让企业可以快速获得结果。同时,降低了数据管理成本,减少了维护工作量及其相关成本。
案例实施效果:
通过使用该数据仓库解决方案,国家电网公司数据中心全面改善以往“信息孤岛”等现象,有效实现了对企业数据资源进行集中存储、统一管理的目标,为企业各应用系统提供数据层集中服务的数据环境。在业务上主要体现在:
1.提高国家电网安全运营管理能力,不仅科学有效的管理电网设备资源,还提高了事故管理和防范水平;
2.增强财务绩效分析能力,帮助企业充分利用资金,并为员工绩效分析提供支持;
3.有效促进电力营销和服务,提高了电力的需求预测、价格制定和用电政策及服务能力;
4.完善报表管理,为领导及时提供全面的关键业务信息,为领导的资源计划和科学决策提供保证。