异构Flink集群中负载均衡算法研究与实现

来源 :南京大学学报:自然科学版 | 被引量 : 0次 | 上传用户:JIADOS
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Flink是目前非常流行的流处理引擎.和先前的Hadoop,Spark,Storm等分布式计算框架相比,Flink能实现低延迟、高吞吐,保证Exactly Once.调度模块是保证集群高性能非常重要的一部分,但目前Flink调度默认把集群中所有节点看作是同等性能的,采用轮询调度策略.但在异构集群里这样的调度就会低效,因为计算资源少的节点运行的Task和计算资源多的节点运行的Task一样多,所以局部负载不均衡,影响Job的运行时间和吞吐量,造成延时.提出平滑加权轮询任务调度算法和基于蚁群算法的任务调度算法,
其他文献
近日,由中国民办教育协会、浙江省教育厅主办,温州市人民政府、浙江省民办教育协会承办的以“推进改革,优化环境,提高质量”为主题的中国民办教育发展大会暨中国民办教育协会2012
俗话说:“鸟择良木而栖。”既然鸟是择“良木”而栖的,为何却有鸟要择烟囱而栖呢?
期刊
要想成为一个完整意义的人,除了物质营养的供给,精神养料的滋养必不可少。缺少了精神养料,人的心灵会枯竭,人的灵魂也会严重的营养不良。初中语文教学就如同精神养料,对于学生的成
本文从风景区规划的发展和要求入手,通过分析风景区控规信息系统需求,建立风景区控规管理信息系统的总体框架;结合太极洞风景区从系统功能与系统结构等方面进行了系统的总体
互联网时代的到来为图书馆发展带来了新的发展机遇,“互联网+”为高校图书馆带来转变,文章提出了通过做好整体设计工作、完善信息管理技术、实现资源深度融合、建设智能化平
2007年,甘肃省在16个县开展了“省直管县”财政体制改革试点,改革取得了一定的成效。2009年,省政府决定再增加25个试点县,将改革试点范围扩大至41个县。本调研报告以分析16个试点
“只要有长远发展战略的企业,想建百年的企业,不想退出市场的企业,都会重视职业教育发展。”教育部副部长鲁昕在国务院新闻发布会上鼓励中国企业参与举办职业教育。职教兴国,
[摘要]对青年学生进行马克思主义理论教育,是由我们社会主义国家的性质和办学宗旨所决定的,是帮助学生树立正确的世界观,培养社会主义建设者和接班人的主渠道。面对当前的国内、国际环境的深刻变化和网络技术的发展,高校的马克思主义理论教育要实现创新。这不仅需要观念更新、内容创新,还要方法创新、课堂教学创新,实现马克思主义理论和谐育人的终极目标。  [关键词]马克思主义 理论教育 挑战 创新  [作者简介]秦
爱因斯坦说过:人的知识是有限的,而想像力却概括着世界的一切,推动着文明的进步,并且是知识进化的源泉。没有想象力,就好比鸟儿没有翅膀,是很难飞翔起来。在文学创作中,创造性