交通信息分布式处理中的Hadoop调度算法优化

来源 :计算机工程与设计 | 被引量 : 0次 | 上传用户:jackmengxiaojing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为从海量交通信息数据中有效地挖掘出为城市智能交通服务的信息,提出了在分布式环境下的改进型计算能力调度算法。根据对海量交通信息数据与分布式调度算法进行的分析与研究,指出了相关数据的特点与算法待改进的关键点,架构了在分布式平台下公平调度与延时调度的改进模型,优化了Hadoop在对交通数据处理时的调度算法,弥补了普通调度算法实时性的不足。实验结果表明,在分布式环境下,使用优化后的调度算法处理计算密集型或I/0密集型交通信息数据,计算所花时间较小,性能较优,具有较好的实时性。
其他文献
改革开放以来,随着经济社会的快速发展,杭州基础教育实现了从“基本普及”阶段向“均衡优质”阶段的历史性跨越。通过加大教育投入力度、完善教育资助体系、设置专项教育经费以
一万块钱范汉章是颍平县的一位乡党委书记,因他长得人高马大,说话又直声音又大,人们就给他送了个绰号叫"范骡子".他在下边干了十年,说起来也是有些政绩的,想当副县长.从人事
提出一种快速有效的基于混合高斯模型和帧差法的视频吸烟检测技术。利用混合高斯模型获取准确的背景,通过帧差分法对连续两帧的灰度图像序列进行绝对差运算,与背景相减获得运动目标区域;根据改进的转换模型将稀薄烟雾图像从RGB颜色空间转换到HSV颜色空间,对其颜色特征提取并进行分析,进一步将稀薄烟雾区域从运动目标区域中分离出来。实验结果表明,该技术不易受到周围环境的限制,灵敏度高、适用范围广。
针对汽车车速较低时低效率、高排放和怠速工况油耗较高等问题,对采用启停技术来达到城市汽车节油减排的作用进行研究。首先阐述了发动机怠速停机启动控制原理、电控单元和控
为了解决用常规算法求出的流体与固体对流换热系数的不真实性问题,采用了流固耦合计算方法计算固体壁面的温度。其中采用模型模拟湍流流动,用壁面函数法修正处于流场内部的固
随着3G技术的不断发展,以光网络为基础的新一代传送网技术将迎来蓬勃发展的新阶段。文章从PTN、OTN、FTTx三大热点技术出发,诠释新一代光网络。
水泥基胶凝材料在土木工程领域应用广泛,其绿色生态化研究是近些年的热点,使用颗粒堆积设计方法是实现材料的绿色低碳化的途径之一。本文基于可压缩堆积模型,采用离散单元数
农村教师收入水平低,工作繁重且压力大,受教育水平较高但不受尊重,政治地位低下,声望和社会影响力高但对社会地位无益。农村教师生存状态不佳的原因主要是:基层政府功利的政绩观和
本文报道了自调Q激光晶体 (Cr,Yb) :YAG的生长及其在室温的吸收和荧光光谱特性 ,而且用钛宝石激光器作为泵浦源 ,获得了 1 .0 3μm、脉宽为 40 0ns、平均输出功率为 35mW的自