基于MapReduce的无线网优平台数据分析方法

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:pjliuchuang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着时代的发展和人们需求的不断提高,通信行业在过去的几十年里发生了翻天覆地的变化,尤其是移动通信的迅速发展,使用户彻底摆脱终端设备的束缚,实现了完整的个人移动性。进入21世纪,移动通信已逐渐演变成社会发展和进步必不可少的工具。随着移动通信的发展,运营商的业务和用户在不断的增加,这导致移动通信网的规模不断的扩大,为了进一步提高移动通信网的质量和用户的体验,无线网络优化工作的重要性日益突显出来。在无线网络优化中数据分析是一个重要环节,因为所有的无线网络优化工作都是基于基础数据的分析结果去发现问题并解决问题,但随着移动通信网业务和规模的不断扩大,越来越多的无线网优数据产生并积累下来,这对传统的数据分析方法提出了严重的挑战。面对目前海量的无线网优数据,传统的数据分析方法基本会采用数据分割、建立索引、使用临时表和缓存等策略来处理但由于其单机运行、设计不合理等因素导致数据分析效率低下、性能上有瓶颈、可扩展性差等问题。因此设计一种高效的、性能和可扩展性都有保障的数据分析方法是十分必要的。为了解决上述问题,本论文研究了无线网优数据的特点、数据分析的需求以及当前大数据处理技术MapReduce等内容,基于MapReduce这个分布式处理模型提出了一种基于MapReduce的数据分析方法,并依据此方法在Hadoop平台下实现了一个分布式数据分析平台。通过对该平台进行测试实验,证明该数据分析平台能高效的完成目前海量无线网优数据的分析任务,满足无线网优平台数据分析的要求,所以本文提出的基于MapReduce的无线网优数据分析方法是合理有效的。
其他文献
摘 要本文首先针对校园网网络管理中故障管理的需要,对SNMP协议、WBM的实现技术和标准,及网络故障管理的方法进行了研究。然后利用分层树状体系结构的思想,设计并实现了基于W
无线传感器网络主要用途为采集环境数据,如无线石油勘测网络、火灾预警监测网络、战场环境探测网络等。然而,由于无线传感器内部器件易于损坏,且长期工作在不可预知的环境中,
该文研究了ISTAG的“Scenarios for Ambient Intelligence in 2010”这一报告,目的是要对未来信息社会设计其网络通信结构模型进行分析和设计.在对脚本技术需求、未来技术发
基因表达式编程是一种以线性染色体为基因型同时采用表达式树作为表现型的演化计算方法。随着对基因表达式编程研究的不断深入,基因表达式编程在理论和应用研究领域都取得了很
本文在详细分析现有的矿井安全可视化研究现状的基础上,根据矿井的实际情况和需要,针对已有软件的不足,提出了开发矿井安全可视化交互系统的设想并加以实现。该系统采用组件化的
该论文跟踪了国外入侵检测研究的最新进展,针对现有的入侵检测系统在配置性、扩展性、灵活性上存在的缺陷,将来源于分布式人工智能领域的软件代理技术应用于入侵检测系统,从
目前,对象管理组织(ObjectManagementGroup,OMG)的公共对象请求代理结构(CommonObjectRequestBrokerArchitecture,CORBA)正在成为分布式对象技术的事实上的标准.为了推动CORA
该文的研究目标定位为:基于计算机支持协同工作的研究工作,结合新一代网络软件协作需求,研究相关的软件协作机制、软件协作系统的实现方法与机制,构造相关的原型系统,并应用
该文中作者们分别给出了这些处理的算法和流程及相庆的数据结构.针对研究过程中遇到的问题,作者们应用相关领域的研究成果基础上,提出了多个新的算法和判定规则:采用Chient/S
该文主要研究了如何根据给定的目标描述,进一步自动化、智能化地组合、集成和执行Web services以达到目标.该文采用的解决方案就是,让智能Agent自动地规划、集成和调用各种各