大规模查询日志分析模型构建机制

来源 :数字通信世界 | 被引量 : 0次 | 上传用户:jshaczcl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
日志分析在用户搜索方面具有重要的意义,但是现代日志分析系统中具有多方面的问题,比如离线处理模式的处理时间较长,大量的数据没有办法进行处理.实现日志数据的分级归档,能够优化处理大数据.基于此,本文就提出了以Hadoop为基础的大数据日志分析模型,并且对其中的业务处理流程和功能架构实现全面的分析.实验结果表示,本文设计的大规模查询日志分析模型具有较强的扩展性、良好的数据处理能力,并且还具有有效性及可行性.
其他文献
随着信息时代的高速发展,面向特定专业技术人群的专业图书馆的建设与发展面临着严峻的挑战,本文重点论述了专业图书馆当前面临的主要问题,并就专业图书馆如何突出“专业”特
公司社会责任①自诞生以来一直就备受争议.我国于2005年修改《公司法》时,在法律文本中写明“公司应承担社会责任”,从而明确了我国立法者对这一问题的态度.公司作为社会发展
近年来,南宁高新区党工委、管委会坚持把创新、创业作为推动产业发展的第一动力,深入实施创新驱动发展战略,加快科技体制改革,大力建设和完善以科技企业孵化器为主的科技孵化
近年,美国页岩革命使乙烷产量大幅增加.由于乙烷制乙烯工艺相对石脑油制乙烯具有更好的经济性,在美国及世界范围内(尤其是欧洲),以乙烷为原料的乙烯装置建设呈现蓬勃发展的高
和谐校园文化环境建设是和谐社会建设的重要组成部分,是促进大学生健康成长的催化剂.思想政治教育激励、调节功能的发挥为构建和谐校园文化建设提供了重要保障.思想政治教育
我国巨灾风险发生频率高、损失大的特点,决定了风险分散形式的多样性;巨灾保险的风险分散机制的构建,是在政府主导下联合保险公司、再保险公司、国外保险巨头等参与的保险联
“排除危害”一直被人们认为是环境民事责任或环境污染民事责任形式的一种.事实上,它应为环境侵害排除的一系列责任的总称,它既包括了我国现行环境保护法中民事责任的“排除
法人治理结构是为了响应我国推进事业单位分类改革,公共图书馆自身进行的一项重大的改革措施.公共图书馆进行了大胆的尝试与探索,颠覆传统政府权利主导型的图书馆管理,开创了
在中国矿山,开采丰富的矿产资源,促进经济与工业的持续发展,则必须重视优化矿山地质勘测工程管理方法,不断提高勘测人员的安全管理意识,科学选择探矿地址,全面改善岩土工程勘
2010年中国超过日本成为全球第二大经济体,而人均GDP也已超过4000美元,这标志着我国经济社会发展进入了一个重要转折时期。经济社会将逐渐由生存型社会进入发展型社会的新阶