基于通联日志的用户行为分析系统设计与实现

来源 :北京邮电大学 | 被引量 : 2次 | 上传用户:huacheng5215
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络流量的爆炸式增长,越来越多的研究基于网络流进行分析。网络流的分析对于提升网络服务质量、改善网络管理具有重要的意义。本文设计并实现了基于通联日志的用户行为分析系统完成对通联日志格式的网络流分析。系统实现了三个功能:网络地址标定、用户行为分析、服务器状态监测。具体来说,系统主要包括如下几个部分:1.设计并实现了网络地址标定模块。基于通联日志中客户端与服务器的通联信息差异,本文设计并实现了网络地址标定模块。该模块通过提取通联日志的网络指标,以端口、上下行字节、会话数量、活跃信息为依据进行客户端网络地址和服务器网络地址的标定。系统以Hadoop搭建分布式环境、以MapReduce为分布式计算引擎、以HDFS和HBase为底层数据存储框架,完成了对通联日志的聚合、统计、标定操作,实现网络地址的标定功能。2.设计并实现了用户行为分析模块。本文在考虑骨干网用户数量众多的情况下,提出基于活跃时间分布的群体划分算法,以群体中心点划分群体,通过计算用户的活跃时间分布向量与中心点向量之间的欧式距离,对用户分群,从而发现不同活跃时间分布的用户群体。另外,本文对客户端用户的业务使用偏好与时间进行关联分析,计算出用户在不同时段的业务使用模式,以用户的业务使用模式进行群体划分,从而为针对不同群体用户进行定向营销提供决策。3.设计并实现了服务器状态监测模块。通过观察通联日志,提取出能描述服务器状态的状态指标,本文采用基于时间窗口的指标融合算法,对服务器每个时间窗口的服务状态进行计算,发现服务状态异常的时间窗口,从而检测出服务器是否正常服务。系统设计并实现各个模块完成对通联日志的处理与分析。实现对通联日志的网络地址标定功能;对用户基于活跃时间分布和业务使用偏好的群体性划分分析;对服务器基于时间窗口的状态监测分析。最后对各个功能进行了实验测试与分析。
其他文献
网络游戏内置广告,是指通过科技手段将产品和企业的信息置入游戏内部,将广告信息传达给受众,以达到传播效果并获得营销收益的广告形式。网络游戏作为一种新的媒体平台正在大
[目的]构建高等中医院校护理专业本科学生社区实践教学模式,为社区中医护理实践教学提供指导。[方法]于2010年5月—2011年2月,采用德尔菲专家咨询法,就社区中医护理实践教学
“书品”与“书学”、“书法”、“书家”共同被看作是组成古代书法理论体系的四项基本内容。“书学”主要阐释了古代书法的构成原理;“书法”主要研究古代书法的技法内容;“书
微课是新课程标准下的新兴产物,是以图文并茂的模式展现知识内容,为传统课堂教学注入了新鲜血液。微课主题鲜明,内容选择极具灵活性,且短小精悍,能满足学生的个性学习与发展
<正>踝关节骨折常合并有软组织损伤,并出现不同程度的肿胀和疼痛,伤后24h~72h为肿胀高峰期,常出现张力性水疱,而出现水疱为手术禁忌证[1]。尽管有些损伤程度轻的踝关节骨折可
随着医改不断的深入,为满足主管部门及医院管理者对公立医院财务报告的内容、格式以及行业间同质化的要求,通过对XBRL财务报告体系在国内的推进情况分析及经验借鉴,探讨了在
目的研究还原型谷胱甘肽(GSH)对治疗全身炎症反应综合征(SIRS)的临床疗效以及对炎性介质的影响,了解GSH对SIRS的治疗价值。方法选择符合SIRS诊断标准的48例患者,随机分为GSH
在经历了8月底至9月中上旬一波近40%的上涨行情后,航运板块近一个月来的走势再度萎靡,而这也很难用“回调需要”一言以蔽之。
目的调查北京市朝阳区农村社区居民的酒精滥用情况及相关影响因素,为社区酒精滥用宣教和防治工作提供参考依据。方法 2010年11—12月随机选取1 996名朝阳区农村社区居民,使用
《福布斯》杂志的封面故事这样描写马云:深凹的颧骨,扭曲的头发,淘气的露齿笑,一个5英尺高、100磅重的顽童模样。可不要小看这个“顽童”的能量,是他张罗着举办互联网每年最