2. 您的位置
3. 首页
4. 期刊论文
5. 大数据流式计算框架Storm的任务迁移策略

大数据流式计算框架Storm的任务迁移策略

来源 :计算机研究与发展 | 被引量 : 0次 | 上传用户：zhuangjun_1988

【摘 要】

：

Storm作为流式计算模式下最具代表性的平台之一,其默认轮询的调度机制未考虑到异构环境下不同工作节点的自身性能和负载差异,以及工作节点之间的网络传输开销和节点内部的进

【作 者】

：

鲁亮  于炯  卞琛  刘月超  廖彬  李慧娟 

【机 构】

：

新疆大学信息科学与工程学院,新疆财经大学统计与信息学院,国网乌鲁木齐供电公司

【出 处】

：

计算机研究与发展

【发表日期】

：

2018年1期

【关键词】

：

大数据 流式计算 Storm 通信开销 任务迁移 

【基金项目】

：

国家自然科学基金项目(61462079,61262088,61562086,61363083,61562078);新疆维吾尔自治区自然科学基金项目(2017D01A20);新疆维吾尔自治区高校科研计划基金项目(XJEDU2016S106)~~

下载到本地 , 更方便阅读

下载此文 赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

Storm作为流式计算模式下最具代表性的平台之一,其默认轮询的调度机制未考虑到异构环境下不同工作节点的自身性能和负载差异,以及工作节点之间的网络传输开销和节点内部的进程与线程通信开销,无法充分发挥集群的性能.为了在各类资源约束的前提下最小化通信开销,在建立并论证Storm资源约束模型、最优通信开销模型和任务迁移模型的基袖上,提出一种异构Storm环境下的任务迁移策略（task migration strategy for heterogeneous Storm cluster,TMSH-Storm）,包括

其他文献

光温条件对玫瑰茄发育特性的影响分析

对玫瑰茄(Hibiscus sabdariffa L.)进行不同光温条件处理,结果表明:在长日照条件下延迟发育,在短日照条件下则提早发育。对具有5～12片真叶的小苗进行10～12天左右的10～13h光照处

期刊

玫瑰茄光照积温发育

不同肥料、施肥水平及施用方法对玉米产量、性状及效益的影响

研究了不同肥料、施肥水平及施用方法对玉米产量、性状及其效益的影响。结果表明:A-40处理(沃夫特控释肥600 kg/hm2)的穗长最长;CK2-40处理(二次追肥600 kg/hm2)无秃尖;CK2-4

期刊

玉米施肥产量性状效益

螺旋输送机螺旋体挠度有限元分析

首次使用ＳＡＰ５软件对螺旋体整体结构进行了有限元分析，并分别使用ＦＯＲＴＲＡＮ和ＢＡＳＩＣ语言编制了可供实用的前后处理程序．笔者认为：采用有限元法对螺旋体挽度分析计算结果较过去的使用值为小，从而在同样

期刊

螺旋输送机有限元分析挠度

航空发动机叶片铸造缺陷激光熔覆修复的研究

研究了激光熔覆工艺参数和Y2O3含量对航空发动机叶片铸造缺陷激光熔覆开裂敏感性的影响。结果表明,当激光工艺参数P=1.5kW,V=180、190mm/min,d=3mm以及Y2O3含量为1.5wt%时,可

期刊

镍基高温合金叶片铸造缺陷激光熔覆开裂敏感性修复

试论我国反垄断法价值目标的定位

期刊

反垄断法经济自由经济平等价值目标竞争自由

中药药动学研究方法概述

中药药动学的研究现已成为中药新药开发的必须研究项目,本文对中药药动学的研究方法(主要是血药浓度法和生物效应法)进行了简要的概述,讨论了目前针对中药药动学研究的思路。

期刊

中药药动学研究方法血药浓度法生物效应法

规范民办职业技能培训行为的对策研究

民办职业教育是当前教育事业发展的一大亮点,并逐步成为公办职业教育的重要补充。而民办职业技能培训是民办职业教育的重要组成部分。自《中华人民共和国民办教育促进法》施

学位

民办教育职业技能培训行为规范

打磨思想品德课堂教学细节

<正>俗话说:"成在细节,败在细节。"教学细节把握是否恰当、处理是否得当,决定了课堂教学的质量与成败。一节优质的思想品德课需要教师用心打磨细节,在细节中打磨自己、超越自

期刊

思想品德课堂教学细节升华情感

仿古山水图册(局部)

期刊

仿古山水图册

变电站直流系统接地故障及环网危害分析处理

随着电力系统的广泛应用，由电力故障引起的电力事故越来越多，其中因直流系统接地故障引起的事故占据着很大的比例。文章通过对直流系统接地故障及环网进行分析，阐述了其相关危害

期刊

变电站直流系统接地故障直流环网处理措施