基于Hadoop的电网资产系统数据质量管理平台的设计与实现

被引量 : 0次 | 上传用户:yifanjiawei
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类社会渐渐进入大数据时代。据IDC统计,2011年全球数据量已达到1.8ZB,且还将以每年50%的速度继续增长。在这股数据浪潮的席卷之下,社会各领域也开始加入到大数据产业化进程中,电力行业也概莫能外。据美国德克萨斯大学针对数据有效性的一项研究表明,企业通过提升对自身数据的使用率和数据质量,能够显著提升企业自身的经营表现。如果企业数据使用率提升10%,电力行业中企业人均产出将能够提升18%左右;而如果企业数据质量提升10%,电力行业受益最为明显,净资产收益率2(ROE)提升幅度为218%。总的来说,这些影响是由数据质量带来的,因为数据使用率的提升之所以能提升电力行业人均产出,也是因为这些数据达到了一定的质量。由此可知,数据质量对电力行业对于电力行业的经营至关重要。既然数据质量对电力行业的影响那么重要,那么如何在大数据的时代背景下保证和提升电力行业的数据质量呢?本文通过阅读相关文献对以上问题进行了较深入的研究,并在论文中提出了自己对电网资产系统数据质量管理平台的设计思想,即使用预防和治理相结合以及自动和手工相结合来保证电网资产系统的数据质量。此外,由于目前的电网资产系统用的是关系型数据库,所以本人主要是针对关系型数据库的相关质量问题进行处理。考虑到电网资产系统数据质量管理平台的可扩展性,该平台也为其他数据格式提供了相应的接口,以便在大数据时代下实现平台对其他格式数据的处理。最后,在上述设计思想的指导下,本文采用程序设计阶段使用到的UML技术,数据库设计阶段使用到的E-R图技术,以及程序开发阶段的开发模式和SSH架构,并基于Hadoop分布式平台,开发电网资产系统数据质量管理平台。
其他文献
目的:探讨一阶导数光谱法检测复方醋酸泼尼松龙滴鼻液中醋酸泼尼松龙含量的方法。方法:用一阶导数光谱法直接测定复方醋酸泼尼松龙滴鼻液中醋酸泼尼松龙含量,在268.9nm波长处
自我分化是指个体能够区分理智与情感的能力,它是个体心理成熟最为关键的个性品质之一,对个体的心理功能和行为产生重要影响。传统的中国家庭教育常常忽视对孩子自我分化能力
作为调整人们行为的制度体系,法律必然要求权威,而对法律权威理论做出最杰出贡献的当属拉兹无疑。拉兹的权威命题是为“社会来源命题”提供合法性证明的,也就是说权威命题是为
本文通过对文献资料的查阅和高校排球运动开展情况的观察,对山东部分高校排球运动的开展情况及学生对排球兴趣现状进行了分析,发现山东部分高校排球教学存在教学方式落后、场
追究行政领导责任是国家解决社会问题的重要途径。但是行政领导责任的含义至今仍有争论。简单而言,领导责任有广义和狭义之分。本文仅讨论行政领导责任。本文将从行政领导责
探讨土茯苓在妇科带下病(阳虚湿盛证)治疗中的临床疗效,为土茯苓的临床应用提供一定的科学依据。方法:以47例带下清稀如水为主症的肾阳虚型带下病妇女为研究对象,以土茯苓为主药
<正>养士始于春秋,盛于战国。那时有一技之长的人为出人头地,投奔权贵做门客是捷径之一;权贵们为扩大影响,也要广招门客,以壮门庭,力图取得政治博弈的优势,门客
期刊
儿童具有亲近自然、亲近生命的天性,自然对于幼儿教育具有巨大的教育价值,符合幼儿身心发展的需要。幼儿园自然课程的生成是指在幼儿园室外自然环境的师幼互动过程中,教师对
根据阿德勒的自卑情结理论,本文认为,霍桑的文学创作的主要动力来源于作者在家庭历史、生理残疾以及民族文化等方面的劣势而产生的自卑情结,作者的这种自卑情结积累起来,为了
自动化折弯单元是一种自动化的钣金折弯加工中心,能够代替人工实现金属板材的自动折弯、自动上下料等功能。本文设计并开发了一种全伺服直接驱动的自动化折弯单元,该单元由全伺