基于Hadoop的Web日志分析系统设计

来源 :信息与电脑 | 被引量 : 0次 | 上传用户:edisonlin123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
电子商务网站在运行过程中会产生海量的访问日志数据,通过分析Web日志可以获取有价值的信息,并为网站运营提供决策支持。针对传统日志分析系统处理大数据能力不足的问题,本文提出基于Hadoop分布式平台的日志分析系统,充分利用HDFS分布式存储能力和MapReduce并行计算能力实现日志向点击流数据处理,借助Hive数据仓库实现日志分析。
其他文献
原发性肝癌的发生主要与肝硬化、乙型和丙型肝炎病毒感染、黄曲霉素等因素有关,约10%左右的肝癌患者发病原因不明。近年研究表明Hp感染可能在肝炎向肝硬化、肝癌发展过程中起
小学的数学学习,学生主要进行简单的思维,而在初中的数学学习特别是新教材的学习中,更侧重于培养和发展学生的创新能力,让学生自主、探究、合作地学习,留给学生思维空间,提高
当代岭南医家治疗痤疮各有特色,充分体现"因时、因地、因人制宜"的治疗特点。岭南痤疮的主要病因湿热,决定了主要治疗方法为清热祛湿;同时也不乏滋阴补肾、引火归元、用寒远
摘要:本文对冶金行业国营与民营大中型钢铁集团公司进行了毕业生就业岗位、工作任务、职业能力的调研,为冶金技术专业人才培养方案的制定和优化提供了依据。  关键词:就业岗位;工作任务;职业能力  中图分类号:G717 文献标识码:A 文章编号:1674-9324(2012)06-0136-02  冶金行业是国民经济的重要组成部分,近年来产业结构调整初见成效,一大批调产项目投入运营,产业布
随着经济发展和企业的研发能力、生产水平提高,玻璃加工设备产业发展越来越成熟,产品同质化趋于白热化状态,企业盈利能力越来越低。然而消费者的需求日益呈现出多样化、个性
通过选择不同官能度的环氧树脂,调节树脂单体配比,获得了不同固化交联结构的环氧树脂基体,并与国产T800级碳纤维复合制备成碳纤维复合材料;研究不同交联结构的环氧树脂基体对
学生角色转变是新课程改革的需要,也是学生发展的需要。要实现学生角色的转变就要由被动学习变为自主性学习,由标准化学习转变为个性化学习,由个体学习转变为合作式学习。 T
本文通过对国内转炉厂生产状况的统计分析,指出国内小型转炉推广应用强化冶炼技术,取得明显的经济效益.单位容积产能达到大、中型转炉的3~4倍.因此,在国内大、中型转炉上研究
采用激光气体氮化与同步送粉相结合的工艺方法,在Ti-6Al-4V合金表面原位合成了TixAly-TiN复合涂层。通过XRD,SEM,OM,EDS,显微硬度测试等手段研究了该复合涂层的物相组成、显
归纳先进复合材料国防科技重点实验室在航空先进树脂基复合材料方面的应用和研究进展。研制出超薄热塑性无纺织物层间增韧技术以实现提高复合材料的CAI性能。设计出的多夹层