Spark下故障诊断模型研究及云平台间的数据共享

来源 :华北电力大学 | 被引量 : 0次 | 上传用户:inc9649
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能电网建设的不断推进,智能化电力一次设备和常规电力设备随之增加,监测数据变得日益庞大,数据集中化和数据共享将成为电网建设必然趋势,集中化之后的海量数据故障分析和在线实时数据的快速处理面临挑战。云平台处理这些数据具有天然的优势,可以满足这些需求。而深度学习在各领域的应用效果表现较好,渐渐取代了机器学习算法。本文将基于云平台、电网设备故障诊断分析采用深度自编码网络、云平台间数据共享使用Alluxio展开研究。设计了一种面向电力设备监测数据故障诊断模型训练及云平台间数据共享的架构。在该架构下,以电网重要设备变压器为例,研究了Spark下DDAE(Distributed Deep Auto-Encoder)的变压器故障诊断模型的实现,将训练的模型参数通过Alluxio以备Storm云平台使用,为Storm快速流式处理实时诊断做好铺垫。实验部分在Spark云平台下首先通过经典的分类数据集对DDAE模型的分类效果进行初步的验证,表明了DDAE模型适合用于分类数据。然后使用变压器的DGA数据对DDAE模型和贝叶斯的模型进行实验,该实验通过对DDAE模型的单机和集群实验,表明了集群可以对该模型训练起到加速作用;DDAE模型和贝叶斯模型的准确率实验,表明了DDAE模型比贝叶斯模型在变压器的故障诊断上有较高的诊断准确率。Alluxio将HDFS(Hadoop Distributed File System)或硬盘的数据链接到Alluxio,而Spark和Storm平台可以通过Alluxio对数据进行访问。Alluxio实验表明了Spark和Storm通过Alluxio不仅可以实现数据共享,而且通过Alluxio可以对指定数据进行快速访问。
其他文献
古代中国与古罗马早期社会,在继承目的、适用主体等方面均表现出相似性。随着生产力的发展,私有财产开始出现,无论是中国的早期社会还是古罗马的早期社会,有关财产继承的法律规范渐渐得以发展。秦汉与古罗马(罗马共和中期至帝国中期)是在时间相近的历史时段内,闪耀在欧亚大陆两端的不同文明,同一时期的这两个文明在财产继承制度的产生与发展上都做出了巨大的贡献。结合传世古籍,可以看出秦汉的财产继承往往与家产分割同时进
虽然很忙,张冰还是提前到达会议室等候。张冰亲切温和,言谈间笑意盈然;然而,这并不妨碍他回答问题时的一针见血、条理分明。甚至可以说,思路清晰、富有逻辑就是整个谈话中,张
随着保险行业在我国的快速发展,广大人民群众的保险意识也越来越高,因此,对保险从业人员的专业能力和业务水平提出了更高的要求。在此背景下,保险从业人员一定要在工作实践中
世界上有三大名著问世极为有趣。债务逼出了《高老头》,车祸引出了《飘》,吵嘴催生了《鲁滨逊漂流记》。
二次启动股改的湘火炬,完全颠覆了首次股改方案送股+认沽权利的模式,而是采用潍柴动力发行A股换股吸收合并湘火炬,从而实现了从H股回归A股的模式创新。而这,对于尚未进入股改
应用区域化探资料中Li、B、F等元素的富集、贫化规律,在划分新疆哈密雅满苏一带岩浆、构造活动作用范围的基础上利用负相关的CaO、SiO2比值确定高钙地质体的分布,结合岩浆、构
高分一号(GF-1)卫星是中国高分系列卫星的首发星,自2013年4月成功发射以来,在中国农业遥感业务工作中得到了广泛应用,已成为中国大宗农作物种植面积遥感监测的主要数据源。该文
目的:研究阻断OX40/OX40L通路联合ECDI结合供体脾细胞(ECDI-SPs)能否协同诱导预致敏小鼠心脏移植免疫耐受,并探讨其作用机制,为临床诱导预致敏受者免疫耐受提供新的方法。方
“用搜索引擎就可以找到想知道的一切,图书馆的存在还有意义吗?”这个曾让很多图书馆长悲观的问题,似乎有了乐观的回应。作为全球规模最大的实体图书馆之一,大英图书馆在日前的一