【摘 要】
:
由于电信运营商面对的计算任务日益趋向于复杂多样,需要充分利用已有的强大硬件平台建设统一的云计算平台,以满足其各种计算需求。云计算是近几年来计算机领域的一个研究热点
论文部分内容阅读
由于电信运营商面对的计算任务日益趋向于复杂多样,需要充分利用已有的强大硬件平台建设统一的云计算平台,以满足其各种计算需求。云计算是近几年来计算机领域的一个研究热点,是基于互联网的一种分布的超级计算模式,被誉为下一代互联网技术的核心。其中,Hadoop分布式云计算平台是一个典型的云计算架构平台,由于其灵活、经济、开源、易扩展的特性,使得该平台成为电信运营商搭建云平台的一个重要选项。为此,本文基于电信运营商的计算需求,对Hadoop开展研究、分析和优化。本文首先深入研究了Hadoop的架构,针对其在电信运营商大规模集群环境下的主资源调度节点JT的单点失效问题,提出一种面向大规模Hadoop集群的异域热备份双JT模型。通过主备份JT选举算法,实现两个主控节点的竞争;通过分析研究在主节点坏损情况下的应对办法,确保模型的稳定性;通过备份节点预处理计算节点的反馈信息,减轻主用节点的处理负担,进一步深化主用和备份节点的协调配合。其次,对Hadoop的作业资源调度算法进行研究分析,基于电信运营商存在大量突发实时作业的需求,在现有的Hadoop公平调度算法基础上,提出一种基于多因子判断的新型公平调度算法抢占模型。该模型可以根据数据本地化、资源足用性、重视作业效率、重视系统效率等因子,针对性的选择被抢占的计算节点,以适应不同的应用需求。最后,通过设计仿真环境,测试并验证了基于多因子的新型抢占模型的可行性和有效性,同时根据实验结果提出相应的解决方案和未来的研究方向。
其他文献
战术Ad Hoc网络是Ad Hoc网络在战场指挥通信领域的一个典型应用,它具有节点分布区域广、作战需求强等特点,其移动模型技术是决定作战能力的关键技术之一。战术Ad Hoc网络中节点
特征选择是指从初始特征全集中,依据既定规则筛选出特征子集的过程。通过剔除冗余特征,以达到降低算法复杂度和提高算法性能的目的。特征选择是解决维数灾难问题的有效手段,
教学是学生与老师之间的互动,是教与学的有机结合,也是双方之间的绝对统一。这就需要教学当事人——老师和学生的积极参与、互动和交流,这不仅仅是将老师的教学活动与学生的知识
随着网络技术的不断进步、网络应用的不断增多,网络流量迅速爆发,对于服务质量、带宽计费以及入侵检测等网络管理而言,准确的流量分类变得更加重要。然而,在当前的网络环境下,由于
随着企业的逐渐壮大和信息技术的飞速发展,办公信息系统(Office Information System, OIS)已经成为提高企业办公效率的主要策略。即通过办公自动化来实现企业日常事务的办理,
智能车辆作为智能交通系统的重要研究内容之一,它是一个集环境感知、路径规划、决策控制等技术于一体的复杂系统。其中,决策控制技术占有重要地位,相当于人的大脑,现有的决策控制
自然场景图像中通常包含大量的文字和图像信息,其中文字信息可以帮助人们更好的理解图像内容。利用计算机自动检测并识别自然场景图像中的文本信息,是模式识别和计算机视觉中
虚拟手术作为虚拟现实技术在医学方面的应用,它对医师培训、手术计划和手术医学教学等方面的改进起到很大的帮助。其目的是在计算机中创建与真实手术环境基本相同的虚拟手术环
蛋白质亚细胞定位预测就是利用原始氨基酸序列来判断其具体的亚细胞归属,预测依据为生物学常用的观点,序列决定结构,结构决定功能,而亚细胞定位与蛋白质的功能有密切联系,所以我们
作为动力系统的一个分支,神经网络具有丰富的动力学行为。它在诸如模式识别、信号处理和优化计算等方面均有广泛的应用,这吸引了很多学者对其动力学行为展开研究。本文主要研究