基于Hadoop的海量配网指标数据的存储及处理

来源 :北京林业大学 | 被引量 : 0次 | 上传用户:qpowapian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着电力系统规模及复杂程度的日益增长,因此配电网中监测终端的安装数量不断增加,采集到的配网数据也直线式增长。当前配网中数据处理系统主要使用的是传统的数据库以及集中式的处理方法,然而面对电力大数据来讲,这些方式的处理效率较慢,数据质量较差。所以解决海量配网数据的存储问题并提高其计算效率在我国电力系统的发展中显得尤为重要。该文在对Hadoop平台下的并行计算框架MapReduce、分布式文件系统HDFS以及面向列存储的非关系型数据库HBase等技术架构及工作机制的研习之后,参考现阶段的电力数据处理方法,提出基于Hadoop的海量配网指标数据的存储及处理方案,解决当前电网传统数据处理方式无法满足电力大数据的存储以及计算效率低下的问题。最后本文在实验部分,将传统的数据指标存储及计算方式与基于Hadoop的分布式存储计算进行对照,验证了该研究的优越性和可行性。
其他文献
网络化控制系统是不断更新发展的计算机技术、通信网络技术与控制学科相互结合的产物。由于通信网络的引入,网络化控制系统具有成本低、易安装、易维护等诸多优点,已经在车间
本文期于对《新华日报》中的涉美报道进行研究,研究时间限定在《新华日报》(重庆版)所发行的1938—1947年之间。在此大的研究主题之下,进一步研究的问题包括:1、《新华日报》
随着社会的发展,很多大型仓库都面临物资安全问题。传统的仓库安防需要在各角落固定安装红外摄像头等安保装置,然而大型仓库内货架林立,货架与货物容易遮挡摄像头视线,存在监
本论文分为四章:第一章为文献综述;第二章为基于抗偏头痛药物体系(药物体系)的白芷方药物制备工艺研究;第三章为基于抗偏头痛药物体系的白芷方药物质量控制方法研究;第四章为
随着油田深入开发,采出液的物理化学特性逐渐发生变化,生产过程中油水分离和悬浮固体聚集的难度加大,传统间歇收油方式对游离水脱除器、电脱水器处理流程和排出的污水水质都
近年来,光纤光栅传感器是传感器领域的研究热点,广泛应用于工业、生物医学、石油化工等。倾斜光纤光栅作为光纤栅大家族的一员,有着独特的优点,对其研究也越来越多。目前对倾斜光纤光栅的研究主要集中于倾斜短周期光纤光栅(也称倾斜布拉格光纤光栅或闪耀光纤光栅,TFBG)的研究,对倾斜长周期光纤光栅(TLPFG)的研究较少。本文将TPFG与TFBG级联在一起,呈现出不同于单一TLPFG与TFBG的特性,对研究倾
基于神经网络的非接触式疲劳驾驶检测已成为当前针对疲劳驾驶检测领域炙手可热的研究方向。它有效解决了接触式疲劳检测方法给驾驶员带来的干扰以及单一信号源对于反映疲劳程
多智能体系统的能控性和能观性问题是控制理论的一个基本和重要的问题,其中,能控性和能观性是多智能体系统分布式控制、建立模型、对实际问题和模型分析的一个非常有用的研究
磁流体是一种稳定的胶体系统,它由纳米级磁性颗粒、包覆在颗粒表面的活性剂和载液组成,同时具备固体磁性材料的磁学特性和液体的流动性。其微观结构在外界磁场的作用下能够形成规律性的分布,所以当外界磁场存在时它具备一些独特的光学性质,如可调折射率、磁致双折射等。磁流体可调谐的性质使它在新型光子器件领域具有很大的应用前景,如磁场传感器、可调谐光缓存器等。光纤传感器具有小巧轻便、抗电磁干扰、耐腐蚀、耐高温等特性
网络化多智能体系统的能控性已经成为了当下的热门问题,具有一定的理论价值和实际意义。本文在先前成果的基础上,结合图论、控制理论、矩阵理论等方面的书籍和相应的数学软件