论文部分内容阅读
随着智能电网的建设和发展,智能用电环节积累了大量基础用电数据,这些数据具有海量、高频、分散等特点,如何将其转化为有价值的知识以辅助电网企业进行数据分析和决策制定是智能用电领域迫切需要解决的重要问题。
目前 “海量数据,只存不用”是相当多电力企业在数据大集中之后面临的尴尬问题。如果能够对企业拥有的大数据进行分析,探寻其数据模式及特征,进而发现某个客户行为、业务数据规律,专业人员就可以预测未来可能发生的变化。这将极大拓展电力企业核心竞争力。而挖掘分析的数据也不再只是现有的结构化数据,业务操作数据,更多的是非结构化数据、实时数据,只有这样的数据挖掘才能更加准确。大数据建设又是一个长期分阶段的过程,首先需要夯实大数据建设的基础,搭建可以服务大数据,具有统一规范、可扩展性的“数据资源中心”。
广州科腾信息技术有限公司(简称科腾)在多年数据仓库管理标准和最佳实践经验积累的基础上,遵循电力企业信息化规划框架,参考国际数据中心架构标准,同时满足各业务系统决策分析的实际需求,推出了一个统一、安全、高效的“数据资源中心”架构解决方案,实现对数据的统一建设和维护,为后续的大数据的深层建设奠定坚实的基础。
科腾“数据资源中心”架构包括几个主要的区域:企业信息规划、治理区域,负责体系化的数据治理和数据质量管理、信息共享和整合。数据仓库区域,包括时镜像数据区域、时态CIM区域、星型模型数据区域,负责采集企业运行和管理中产生的数据,参照国际电力行业普遍采用的CIM标准模型、结合企业实际业务,统一搭建基于CIM和时态的模型,并且转变搭建星型模型区域。系统管理区域,负责制定数据仓库建设和运维过程中的规范,提高大数据平台的信息安全管理、性能扩展、配置管理等。流计算区域负责分析实时数据。Hadoop系统区域负责对大量的结构化和半结构化数据进行管理和分析。应用区域负责对数据和信息进行展现、分析和挖掘、内容分析和应用开发。
在“数据资源中心”架构搭建过程中,科腾充分考虑数据在各层次间传输、转换、存储的统一管理,明确提出了架构的一个重要核心—— “KT—CIM模型”。根据电力所有业务主题,参考国际已经成熟的电网CIM模型,改造“数据资源中心”的DW层的模型,提供统一共享的数据模型。“KT—CIM”模型中除了考虑电力业务模型之外,还在国内首次提出建立IT运行的数据模型。企业信息口的专家在充分为业务部门模型规范改造的同时,对自身信息化建设、实施、运维等管理工作中产生的数据也统一规范管理,形成在KT—CIM模型中的一部分,也是独有的核心模型KT—ITCIM模型。
科腾“数据资源中心”已经建好,后面的路任重而道远,对架构进行管理、运维,对“KT-CIM”的版本建设,这些都是摆在公司面前的一个个课题,但是科腾还是坚信“数据资源中心”具备实现更大程度信息、知识发现的条件和基础,完全可以立足数据运维服务,创造数据增值价值,为用户提供更多样数据服务产品。
以“数据资源中心”为纽带,新型数据运维的成果将有可能作为一种新的消费形态与交付方式,给电力企业带来全新的使用体验,打破传统业务系统数据各自为政的局面,进一步推动电网生产和企业管理,对企业生产经营、管理以及未来的智能电网建设提供更有力、更长远、更深入的支撑。
目前 “海量数据,只存不用”是相当多电力企业在数据大集中之后面临的尴尬问题。如果能够对企业拥有的大数据进行分析,探寻其数据模式及特征,进而发现某个客户行为、业务数据规律,专业人员就可以预测未来可能发生的变化。这将极大拓展电力企业核心竞争力。而挖掘分析的数据也不再只是现有的结构化数据,业务操作数据,更多的是非结构化数据、实时数据,只有这样的数据挖掘才能更加准确。大数据建设又是一个长期分阶段的过程,首先需要夯实大数据建设的基础,搭建可以服务大数据,具有统一规范、可扩展性的“数据资源中心”。
广州科腾信息技术有限公司(简称科腾)在多年数据仓库管理标准和最佳实践经验积累的基础上,遵循电力企业信息化规划框架,参考国际数据中心架构标准,同时满足各业务系统决策分析的实际需求,推出了一个统一、安全、高效的“数据资源中心”架构解决方案,实现对数据的统一建设和维护,为后续的大数据的深层建设奠定坚实的基础。
科腾“数据资源中心”架构包括几个主要的区域:企业信息规划、治理区域,负责体系化的数据治理和数据质量管理、信息共享和整合。数据仓库区域,包括时镜像数据区域、时态CIM区域、星型模型数据区域,负责采集企业运行和管理中产生的数据,参照国际电力行业普遍采用的CIM标准模型、结合企业实际业务,统一搭建基于CIM和时态的模型,并且转变搭建星型模型区域。系统管理区域,负责制定数据仓库建设和运维过程中的规范,提高大数据平台的信息安全管理、性能扩展、配置管理等。流计算区域负责分析实时数据。Hadoop系统区域负责对大量的结构化和半结构化数据进行管理和分析。应用区域负责对数据和信息进行展现、分析和挖掘、内容分析和应用开发。
在“数据资源中心”架构搭建过程中,科腾充分考虑数据在各层次间传输、转换、存储的统一管理,明确提出了架构的一个重要核心—— “KT—CIM模型”。根据电力所有业务主题,参考国际已经成熟的电网CIM模型,改造“数据资源中心”的DW层的模型,提供统一共享的数据模型。“KT—CIM”模型中除了考虑电力业务模型之外,还在国内首次提出建立IT运行的数据模型。企业信息口的专家在充分为业务部门模型规范改造的同时,对自身信息化建设、实施、运维等管理工作中产生的数据也统一规范管理,形成在KT—CIM模型中的一部分,也是独有的核心模型KT—ITCIM模型。
科腾“数据资源中心”已经建好,后面的路任重而道远,对架构进行管理、运维,对“KT-CIM”的版本建设,这些都是摆在公司面前的一个个课题,但是科腾还是坚信“数据资源中心”具备实现更大程度信息、知识发现的条件和基础,完全可以立足数据运维服务,创造数据增值价值,为用户提供更多样数据服务产品。
以“数据资源中心”为纽带,新型数据运维的成果将有可能作为一种新的消费形态与交付方式,给电力企业带来全新的使用体验,打破传统业务系统数据各自为政的局面,进一步推动电网生产和企业管理,对企业生产经营、管理以及未来的智能电网建设提供更有力、更长远、更深入的支撑。