分布式网络流量数据分析与管理技术研究与实现

被引量 : 0次 | 上传用户:jy156687
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的迅猛发展,网络管理已变得日益重要。流量监测和统计分析是整个网络管理的基础。为了实现对网络进行综合管理,有必要及时全面的收集、管理网络的流量信息,准确获取网络流量数据,对网络流量态势进行分析,对网络健康状况及未来的发展趋势作出准确判断。网络流量分析一直是通信网络性能分析的一个极其重要的问题。但是目前大部分网络及流量监控都是针对单个或局部链路进行的,然而,当今网络研究者面临的更重要的问题是需要同时对网络所有链路的流量进行建模和分析,包括流量矩阵的估算。针对当前大部分网络流量矩阵估算方法都是采用单一的SNMP链路负载或抽样的NetFlow数据,本文提出一种综合利用多个数据源进行流量矩阵估算的方法。算法将SNMP链路负载与抽样的NetFlow数据结合作为相互纠错码,并设计过滤这两种数据源中的脏数据,从而进行更为精确地流量矩阵估算。同时本文也设计了在单数据源情况下,已知网络的拓扑结构和链路流量,通过期望最大化算法对网络OD对之间的流量需求进行估计。论文使用校园网为实验环境采集数据对本文提出的几种算法进行评估,并与tomogravity、generalized gravity model方法进行比较,实验结果证明了本文提出的算法在进行估算时具有更高的准确性。同时本文结合网络综合态势管理技术的需求,设计了流量态势管理系统的体系结构,完成了原型系统的设计与实现。对流量采集、数据接收、数据传输、流量分析、以及数据的存储与管理等五个功能模块进行了详细的设计;提出了基于OD流的流量分析架构,采用四种相应的算法完成了流量数据的分析,实现了确定网络中关键链路、瓶颈节点、识别大象流以及判定异常流这几种态势分析;设计了流量数据库完成了对大规模流量原始数据以及各种态势分析数据的管理。论文以校园网为实验环境采集真实的网络流量数据,针对本文提出的系统架构,设计的各个功能模块,根据数据的处理流程对整个原型系统进行了功能测试和性能分析。综上所述,本文的工作针对分布式网络流量数据的分析与管理技术提出了有效的解决方案,具有一定的理论价值和应用价值。
其他文献
对糖尿病和肥胖病病因学研究的不断发展使许多单基因糖尿病和肥胖病被发现。对中国人已开展的青少年发病型成人糖尿病、线粒体糖尿病、黑皮素4受体(MC4R)及部分伴糖尿病的遗
随着社会经济的飞速发展,建筑能耗在能源消耗所占的比重越来越大。但是我国人均能源占有量少,能源利用率低,严重的能源压力和环境压力迫使我们必须大力开展建筑节能工作。目
幼儿每日在园的成长从广义上来说,离不开教学活动和游戏活动,将这两项主要的活动细化,教学活动分为五大领域及日常的随机教学等,游戏活动分成晨间区域活动、自主性角色游戏、
计算机网络安全是一门以理论为基础,以实际操作为主要内容的大中专学校普遍需要开设的课程。由于资金和设备的原因,各个院校对于计算机网络安全这门课程的实验还不能给予应有
随着现代网络和无线通信技术的进步,无线传感器网络在国家安全、国民经济等诸多方面均有着广泛的应用,未来无线传感器网络将向天、空、海、陆、地下一体化综合方向发展,无线
<正>公安部《社会消防技术服务管理规定》5月1日起施行2013年10月18日,公安部部长办公会议通过公安部《社会消防技术服务管理规定》,《规定》于2014年由2月3日中华人民共和国
近年来,我国教育改革成果显著,教育事业蓬勃发展,然而,在新的教育改革标准下,高中数学解题教学面临着新的挑战.这就需要相关教育工作者必须从学生实际出发,结合我国高中数学
本文以黏土,工业氧化铝,石英砂等为主要原料,研究了合成温度、原料种类对莫来石生成过程的影响。结果表明:在1400℃×3h煅烧后,氧化铝和石英粉之间反应强烈,生成大量莫来石,
<正>说起田汉,谁都忘不了他在上世纪30年代初创作的名剧《名优之死》。说起《名优之死》,我又想起了那时因主演此剧而崭露头角的魏鹤龄。魏鹤龄在剧中扮演的是正气浩然、身怀
由于受当今社会教育商业化、产业化等负面因素的影响,某些教师的理想信念和治学态度受到了严重的冲击,导致部分历史教师人文综合素养缺失。在新课程理念下,如何提高高中历史