配电网监测大数据的Impala快速查询技术

来源 :电力科学与技术学报 | 被引量 : 0次 | 上传用户:musicwen5918
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对目前配电网监测大数据SQL交互查询速度慢的问题,对配电网监测数据类型进行归类整理,利用Impala分布式处理工具重点研究一种监测大数据的MPP快速查询技术。通过协调节点将查询计划解析为执行计划树,将计划树的片段分配至多个从节点并行执行,各从节点将中间结果按执行计划树流式传递回协调节点,再通过多机集群的全内存并行执行加速查询。选用四机监控系统集群为例进行加载测试和查询性能测试,结果表明:相较关系数据库,MPP大数据快速查询技术大幅提高了数据加载速度。对北京某动车段配电监测的千万级数据记录,关系数据库和H
其他文献
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
报纸
以二苯甲烷双马来酰亚胺(BDM)、4,4,-二氨基二苯甲烷(DDM)为原料,采用Michael加成法制得环氧树脂(E-44)固化剂(BDM-DDM),通过红外光谱(FT-IR)和液质联用(LC-MS)手段验证了所
公私伙伴关系与传统的公共产品和服务提供模式相比具有明显的优势。目前,我国公共工程公私合作中还存在诸多问题,并没有实现社会整体利益的卡尔多—希克斯最优。确立市场化和
[db:内容简介]
该文主要介绍了代县梨园的生产现状,随着树龄增加,老梨园面积不断增大,果品产量及品质逐年降低。通过对低产梨园实施改造,使树体恢复了树势,延长了结果寿命,提高了果实的品质
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
临床局限性前列腺癌放射治疗后有一部分患者会出现复发和转移,其预后往往不佳.对这部分患者进行早期诊断,恰当评估,选择最合适的治疗方法,有助于提高治愈率和延长生存时间.本
使命偏离是社会企业成长过程中重要的管理命题之一,现有研究忽视了公益创投这一重要因素的潜在影响。利用2017年上海财经大学中国社会企业调查数据,对公益创投影响社会企业使
在中试试验的基础上,基于催化裂化反应机理,建立了14集总反应动力学模型,模型中特别考虑了选择性失活的影响。该14个集总为:原料饱和分(Rs)、芳香分(Ra)、胶质及沥青质(Rrb)、柴油链
我们近年来以温肾健脾法治疗慢性肾炎27例,疗效尚满意。兹小结如下:临床资料病例选择:按1977年北戴河肾炎座谈会的标准判断。凡年令在14岁以上,均列入住院观察对象。
期刊