基于Hadoop架构的大数据量日志存储和检索优化

来源 :信息网络安全 | 被引量 : 9次 | 上传用户:jiangshan1017
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop是一个实现MapReduce计算模型的开源分布式并行编程框架,借助于Hadoop,程序员可以轻松编写分布式并行程序,并将其运行于计算机集群上,完成海量数据的计算。本文介绍了基于Hadoop架构的系统的设计与实现,介绍如何提高Hadoop的分布式文件管理系统(HDFS)和MapReduce的执行效率与速度,以及Hadoop的安装部署和基本运行方法。
其他文献
现代职业教育发展的不断加快,为了使中职学生可以更好的进入社会工作,很多中等职业学校都开始对学生进行工匠精神的培养。而美国学者所提出的素质冰山模型理论也与工匠精神的
个体由于其先天遗传、成长环境、自身特点的不同导致出现个体差异性,这是极其普遍且正常的社会现象。而学生在进行课堂学习时,这种个性差异则表现得尤为明显,无论是在学习基础、
文章针对电子政务网络安全问题现状进行了分析,电子政务网络环境存在物理安全、系统安全、信息安全、管理安全等众多安全隐患。随着电子政务网络信息量的越来越大,数据库系统作为电子政务信息系统的重要组成部分,其保障工作是信息安全的重点,文章主要探讨电子政务系统中数据库系统面临的安全问题,推导了安全风险概率,分析了数据库安全保护的技术环境和部分技术手段,并提出了一些建议。
根据小学生年龄特点,仿写对他们的重要性是不言而喻的,正如矛盾曾说:“模仿是创造的第一步。”仿写对于作文刚起步的学生来说,就像一根拐杖,让学生拄着拐杖学习走路,这样才能打开学
2013年12月21日至2014年1月20日,国家计算机网络入侵防范中心发布漏洞总条目为420条,漏洞总数为上月的90.13%,有所下降。其中威胁级别为"紧急"的48条,"高"的47条,"中"的263条,"低"的62条。威胁级别为"紧急"和"高"的漏洞占到总量的22.62%。从漏洞利用方式来看,远程攻击的有346条,局域网攻击的有55条,本地攻击的有