基于ElasticSearch的大日志实时搜索的软件集成方案研究

来源 :吉林师范大学学报(自然科学版) | 被引量 : 0次 | 上传用户:knh1988
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现代企业每天生成很多日志文件,如果能实时处理日志数据,企业能获取更大的商业价值,但管理这个大日志数据是一个巨大的挑战,因为传统的技术用来处理庞大的数据不够高效.Hadoop生态系统提供一种新的方式来处理大数据,ElasticSearch技术是基于云环境的实时搜索引擎.本文提出了基于ElasticSearch实时进行大日志数据搜索的软件集成方案,采用基于硬件创建虚拟机环境,根据搜索条件使用ElasticSearch得到需要的rowkey列表,Hbase用这些rowkey直接从数据库中得到数据.实验证明,随着日志事件搜索量的增加,搜索反应时间不线性增加,基于ElasticSearch的大日志实时搜索的软件集成方案设计具有可行性.
其他文献
引用KVG权威分析报告,对俄罗斯电视产业的发展与变化进行分析,重点探讨了俄罗斯电视传媒内容特点及发展变更。根据俄罗斯本土连续剧的特点及主角英雄人物的归类分析,揭示俄罗
Speaking has been the bottom of the list in college English teaching since last few decades.This dissertation focus on this topic and it is mainly divided into
【正】 正如伟大的革命导师恩格斯所说,海涅是继歌德之后德国最伟大的抒情诗人。海涅也是杰出的讽刺作家和政论家。他不仅是德国人民最喜爱的诗人,而且也是中国人民和世界人
以航空发动机的镍基高温合金压气机叶片为研究对象,采用移动热源,通过COMSOL仿真软件对焊接修复过程中的热源输入参数进行模拟仿真,研究镍基合金叶片在焊接修复过程中需要的
若开张一家线下门店,每天几百个客人上门来购物,选品、结帐、客人自己拎货回家;而在线上做买卖,则是要把订单上的物品上门送到几百个,甚至更多消费者的家里,所以业内有句话:
一、序言烟气脱硫问题,随着使用含硫2.5%的重油日益增加而愈显得重要。虽然对重油加氢脱硫——总能力约为每日500,000桶——1971年付产元素硫三十五万吨,当年仍有燃烧重油所
期刊
互联网高速发展引起了电子商务的高度发展,由聊天社交软件衍生而来的微商在电商行业迅速崛起,正在逐渐深入人们的生活中。在微商交易中,主要支付方式有三种,即微信支付、支付宝转
Extrerae case formulation(ECF) was first put forward by Pomerantz in 1986 and is thought to be a general linguistic phenomenon in daily conversation.Since previ
目的探讨维生素E在治疗儿童轻中度支气管哮喘中的应用价值。方法选取2015年5月~2016年5月就诊于我院及中山市人民医院的6~14岁支气管哮喘患儿,随机分为实验组49例和对照组47
Waiting for Godot is one of the most famous plays written by Samuel Barclay Beckett, and also is the founding work of'Theatre of the Absurd'. In the dra