【摘 要】
:
针对传统MapReduce算法结构在处理大数据时,负载均衡性能不理想的缺点,设计了一种具有负载均衡机制的层次MapReduce模型。该模型利用超立方拓扑结构对MapReduce的映射操作进
【机 构】
:
内蒙古科技大学工程训练中心,内蒙古科技大学信息与网络中心,北京科技大学计算机与通信工程学院
【基金项目】
:
国家自然科学基金资助项目(61462069)
论文部分内容阅读
针对传统MapReduce算法结构在处理大数据时,负载均衡性能不理想的缺点,设计了一种具有负载均衡机制的层次MapReduce模型。该模型利用超立方拓扑结构对MapReduce的映射操作进行改进,通过特定算法将八个结构化的数据中心链接到一个对等的云环境结构中,并使用奇偶直方图组合采样方式的均衡划分方法,实现在用户请求下的节点工作负荷指数均衡。最后,基于Hadoop框架对所提算法进行仿真实验,结果显示所提算法结构相对于原始MapReduce结构,具有更高的并行计算的资源利用率,以及更佳的容错和负载均衡性能,
其他文献
窄带移动自组网在同一时隙内只能有一个节点发送数据,否则会导致碰撞,降低网络吞吐量性能。移动自组网中引入码分多址技术可以显著提高吞吐量,将网络状态建模为马尔可夫链。提出
针对多源动态海量数据复杂事件检测中存在复杂事件不能及时检测以及过多占用内存的问题,提出了-种基于优先级的哈希结构复杂事件检测方法.该方法通过定义各个原子事件的优先
为了改进彩色图像加密算法的安全性等性能,设计了一种基于耦合映像格子的彩色图像加密算法。首先通过一维鲁棒混沌映射对彩色图像的三个基色矩阵基于比特运算完成预处理的置乱操作并分块,对子矩阵进行轮加密,通过耦合映像格子生成S盒,每一轮加密过程先根据辅助密钥选择S盒进行非线性替换,替换后矩阵再两两组合进行双向加密,实现在分量内扩散加密的同时降低相同像素对应三基色分量的相关性。算法将Logistic映射结合明
通过序贯检测可以提高协作频谱感知的准确度,但是在具有频谱感知数据窜改(spectrum sensing datafalsification,SSDF)节点的环境下,系统感知性能急剧下降。为了解决上述问题,提出了
在实时协同系统中,传统的语义维护主要是针对文本编辑器中基于字符操作的一致性维护。在这种编辑环境下,字符与字符之间虽然具有前后继关系,但在属性上没有参照或者依赖关系。然
针对RFID认证协议中存在的安全缺陷或认证效率低等问题,提出了一种改进的基于字合成运算的移动双向认证协议,用来实现标签、读写器、后台数据库三者之间的相互认证。在改进的协议中,利用不同的随机数来保持标签、读写器、后台数据库消息的实时性,充分利用读写器和标签的标志符信息,减少其他信息的引入,结合字合成运算实现对传输信息的加密,从而强化三者之间的身份认证。与原协议进行安全性及性能比较,改进的协议不仅弥补