【摘 要】
：
随着风力发电的广泛发展以及智能化监测技术的推广应用,风力发电监测数据呈现出体量大、类型多、增长快的大数据特征。针对风力发电监测大数据高效存储和快速查询两方面核心
【机 构】
：
上海交通大学电气工程系,国网上海市电力公司电力科学研究院
【基金项目】
：
国家高技术研究发展计划项目(863计划)(2015AA050203);国家电网公司科技项目(520900150037)
论文部分内容阅读
随着风力发电的广泛发展以及智能化监测技术的推广应用,风力发电监测数据呈现出体量大、类型多、增长快的大数据特征。针对风力发电监测大数据高效存储和快速查询两方面核心问题,基于Hadoop平台进行大数据存储优化方法研究,提出考虑风力发电监测数据关联性的哈希分桶存储算法,实现了相关联数据的集中存储,从而提升后期数据查询及处理的效率。在数据存储优化的基础上,实现基于MapReduce的多源风力发电监测大数据并行关联查询。通过在Hadoop平台上进行测试表明,经过哈希分桶存储优化后的多源数据并行关联查询相比传统Hadoop方法查询时间显著缩短。
其他文献
发展城市经济是调结构、转方式、提质量的客观要求，是推动兵团“屯垦”变“屯城”，“戍边”变“兴边”战略布局持续快速发展的有力保障。文章在客观分析兵团城市发展现状及问题
随着我国国家创新驱动战略规划的不断深入,企业创新主体地位的战略价值也不断突显,然而,我国企业在专利资源优化配置方面的管理水平、利用能力、运行机制、保障制度等方面仍
浅谈外语教材评估标准周雪林在外语教学中，教材的地位是举足轻重的。它既是贯彻实施教学大纲的关键之一，又是教师组织教学活动的主要依据和学生学习的中心内容。因此，外语教材的
对美国国家环境预测中心（ＮＣＥＰ）及国家大气研究中心（ＮＣＡＲ）的４０年全球再分析资料在中国应用的可信度进行了初步分析，其中包括温、压、风、湿、降雨量、地面辐射、地面感热、地面蒸发潜热及青藏
选线设计是一个需要综合考虑投资、运营、社会和环境等各方面因素的复杂过程,因此在人工操作过程中会由于设计人员主观因素而遗漏掉诸多有价值的方案。为解决这一问题,国内外
<正>小白菜即不结球白菜(Brassica campestris ssp.Chinensis Makino),又名白菜、青菜、鸡毛菜,我国北方地区俗称为油菜,原产中国,是我国南方各省人们周年喜食的最大众化的蔬
环氧化合物是一类用途极广的有机合成中间体。目前环氧化合物的工业生产方法存在设备腐蚀严重、环境污染等问题，不符合绿色化学和清洁生产的要求，为此寻找新的清洁生产工艺具有
长期以来,设计"以人为本"中的人都被理解为"目标用户",尽管大家对"以人为本"不断作出新的理解和引申,但仍没有打破西方哲学"主客二分"带来的桎梏,把"人"和与之相关的各种要素
学困生问题是一个世界性难题，可以说，有学校教育的地方就有学困生和其转化上的难题。小学对学生的语文学习有重要的意义，如果不从教师语文学科知识的积累上予以重视，必然对小学生
我们对国外有关房地产市场有效性研究的文献进行了仔细梳理,发现房地产市场存在许多与有效市场理论相悖的＂异常＂现象,如房价过度波动、本地效应和房价自相关性等。实证检验方面