基于MapReduce的大数据在线聚集优化设计

来源 :河北大学学报:自然科学版 | 被引量 : 0次 | 上传用户:zengyuzhuo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对大数据在线聚集执行时间长、执行性能及延迟调度性能较差的问题,提出基于MapReduce的大数据在线聚集优化程序设计.使用分片聚集方法使集群中所有机器的计算资源得到充分调用,采用子连接的启发式优先方法优化各节点本地执行连接任务关系运算,实现大数据在线聚集的并行连接.利用混合近似查询框架的大数据在线聚集动态切换机制及基于渐进近似估计的动态切换机制,降低混合近似查询切换误判率,增强大数据在线聚集的执行性能.实验结果表明,该方法设计的在线聚集优化程序在不同数据规模下的执行时间较小,同时在基本频繁查询性能方面具
其他文献
利用长白山地区1951—2019年历史气象资料,结合多源卫星遥感数据对2019年长白山生态气象条件进行综合评估。结果表明:2019年长白山生态气象环境整体较好,气象条件对全省生态质量改善和提升较为有利;2019年长白山平均生态气象质量指数较高,与水热条件匹配较好区域基本重叠,气象条件是影响生态系统的重要因素。
在乡村振兴的发展战略下,对农村能源的使用以及农业生态环境保护等方面都提出了更高的目标,必须在发展农村经济的同时,加强对农村生态环境的建设,打造出美丽新农村,提高农村
通过环境损害鉴定评估程序可以对污染环境事件进行定性、定量评估,多角度、多方面综合判断环境受损程度,为后续污染修复和损害量化提供准确、客观的理论依据。在地下水环境损
在传统的初中政治课堂教学过程中,无论是教学手段还是教学内容,都很难调动学生学习政治知识的主动性和积极性,也很难让学生全身心投入到初中政治课堂中。因此,在当前的初中政
为了给临床合理使用抗菌药物提供科学依据,回顾性调查了医院2016年1月1日至2019年12月31日铜绿假单胞菌耐药率变化趋势及同一时间段抗菌药物年用量,计算使用频度,分析了抗菌
目的探讨剖宫产术后子宫瘢痕憩室(PCSD)TOWER分级诊断与月经异常相关性。方法选取2015年3月至2017年9月在我科就诊的具有剖宫产手术史患者325例,采用超声检查对PCSD患者进行
新时代的到来,国家对于教育行业的关注程度逐渐提升。传统地理教学过程之中,教师过多地注重教学内容,导致课堂之上学生出现学习兴趣不高,能力不强等状况,兴趣逐渐消失的同时
随着我国教育改革的不断推进,英语课程越来越受到各方重视,对英语课程教学方法的改革与创新越来越受到广大教育工作者的关注。当前环境下,互联网技术迅猛发展,教育与信息技术
随着信息技术的快速发展,新媒体技术步入了教学的舞台,给小学语文课堂灌入了崭新的活力。新媒体教学技术这一新型科技的应用,让语文教师开展教学变得更加便利,让教学环境更加
融合卷积神经网络(convolutional neural network,CNN)和双向长短期记忆网络(Bi-directional long short-term memory,BiLSTM)的情感分析模型(CNN_BiLSTM)是一个流行的模型,