基于Hadoop和HBase的分布式索引模型的研究

来源 :信息技术 | 被引量 : 0次 | 上传用户:wang218
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网上信息量飞速增长,海量数据的索引出现了难题,现行的索引方案已经难以提供高效、可靠的服务,为此,设计并实现了一种针对海量数据进行索引的平台模型。该平台模型首先利用Solr分布式索引器生成索引文件,然后利用Hadoop分布式集群,以HDFS分布式文件系统、Map Reduce分布式并行计算模型、Zookeeper同步协同系统以及Hbase分布式数据库技术来处理、协调管理索引和存储海量数据,最后通过实验测试,该平台模型可以克服现行的海量数据索引时存在的效率低的问题,同时具有良好的扩展性和可靠性。
其他文献
介绍利用VHDL(Very—High—SpeedIntegratedCircuitHardwareDescriptionLanguage)硬件编程语言开发FPGA(FieldProgrammableGateArray)来实现PBX(PrivateBranchExchange)端口语音信
针对具有多层介质和多导体的复合结构波导传输特性的复杂性,采用有效折射率法分析了波导传输特性与几何尺寸之间的关系.数值分析了一种具有复合结构的铌酸锂电光式调节器的传输
近5年来,在国际国内创客运动和国家创新驱动发展战略的推动下,"创客"成为国内大学生创新创业教育研究的重要视角,引发学界众多学者的思考和讨论。目前的研究主要集中在“创客
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
本文设想凭借信息系统,通过大数据挖掘,对目标客户进行精确细分、画像,并在此基础上实施精确营销,推动多渠道协同,同时实施资源投放效益评估闭环,实现大数据时代房地产业营销模式创
为了降低静止无功发生器SVG的导通损耗,在SVG中引入TNPC型三电平主电路,构建了TNPC型三电平SVG的总体方案。在分析TNPC型三电平主电路工作状态和死区效应的基础上,提出了无死
为了实现煤仓内煤料高度的测量,设计了一种基于STM32F103 RBT6的料位计测量控制系统,该系统能够利用煤料中的放射性物质,通过光电效应将放射性信号转化为电流信号,并且通过对
针对图像在传输中的安全隐患问题,依据混沌理论,采用六维细胞神经网络与无限折叠映射混沌系统相结合的方法,对数字图像进行加密.实验结果表明:加密后的图像统计特性不明显,相邻像素
冬季,牛食入的鲜青饲料数量减少,质量下降,以料储水、以水健体的运行机制容易受阻,发生“冷性”脱水现象往往比盛夏“热性”脱水现象更为普遍且严重。所以,应给牛提供生理调节水、
在电力市场环境下,负荷的分类和预测至关重要。为了提高预测的速度与精度,提出了运用粒子群与误差反向传播(BP)神经网络相结合的预测方法(POS—BP法)和模型。并根据某市电业局电力