基于Thrift的HBase数据存储机制优化

来源 :科学技术与工程 | 被引量 : 0次 | 上传用户:moqianru
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对Thrift接口服务定义的IDL对HBase数据库按行存储,当数据量大时频繁进行数据请求操作,增加服务调用时间,影响数据通信性能的问题,在详细分析Thrift源码架构基础上,提出了一种新的Thrift IDL设计模型。该模型重新定义了数据传输结构,将多行数据绑定在一起,经过一次RPC调用即可完成多行数据按块存储;采用新的IDL模型,修改了HBase Thrift 服务端的接口以及客户端的非阻塞实现。理论分析和实验结果表明,该方法可有效降低IDL向服务端发送数据操作请求频率,使得HBase储存效率提高4
其他文献
摘要:现阶段,嵌入式计算机技术不断得到快速发展,这在很大程度上促使其在社会生活各个领域内的应用也越来越广泛,且该系统中软件系统比重及软件架构呈现越来越复杂的趋势,引起业界不断提升对软件运行可靠性的高度关注。文章全面阐述了嵌入式计算机软件测试的基本概念,详细探讨嵌入式计算机软件测试的关键技术,以期能提升嵌入式软件测试的质量及应用性能,从而为软件测试工作的开展提供一定借鉴和参考价值。  关键词:嵌入式
本文对一类具有零特征指数的带有快慢变量的奇摄动方程组的周期解进行了专门讨论,用指数2分法证明了周期解的存在性.
在对网格化管理模式基本理念和高校实验室管理现状简单分析的基础上,阐述了基于网格化理念的实验室系统的基本结构,对采用的运行机制进行分析。同时,以作者所在学院的工程实
烟雾的扩散现象的模拟是一个令人感兴趣的领域。本文在分析了真实的烟雾在室内扩散的特点的基础上,提出了一种基于涡粒子法的烟雾模拟方法。充分考虑了烟雾粒子的边界条件,利用八叉树网格来划分空间,计算了涡对速度场的影响。用粒子系统实时模拟了烟雾在室内无风条件下从室内扩散到室外的效果。实验结果表明,用本文中的方法模拟的烟雾具有丰富的流体细节,和较高的计算效率。
本文利用五种复变换矩阵(其中四种为作者新提出),给出一种求解埃尔米特广义特征值问题Ax=λBx的方法,这里A,B为n阶任意埃尔米特阵.可说是[1]和[2]中方法的改进与推广,[1]中讨
摘要:实践教学是计算机专业教学中的一个重要环节,对培养学生的职业能力和实践能力有非常重要的作用和意义。文章结合计算机网络实践教学的特点和本校的教学现状,对实践教学体系改革进行了新的探索和实践。  关键词:中职学校;计算机网络;实践教学;改革  中图分类号:G424 文献标识码:A 文章编号:1009-3044(2015)19-0090-02  在计算机网络课程体系搭建中,以职业能力要求搭建课程模块
轨道交通已经作为广大市民出行的重要交通工具,其服务质量越来越受到大众和管理者的关注。为更好地适应地铁网络化运营的需求,更加便捷的接受来自乘客的服务反馈,更加迅速的为乘
分析介绍了Java Socket,Java IO流等内容,基于Java Socket,结合Java中的输入输出流,编程实现一个简单的Web服务器,通过该实例大致理解Web服务器程序的工作原理。
随着现代科技水平的日益提高,手机等移动设备在人们的生活中的应用得越来越广泛,这不仅代表着科技的进步,更是思想的进步,其中目前为止这类产品做的最好是美国Apple公司,其开
摘要:针对不间断供电的需求,提出了一种基于DSP的双电源备用电源自动切换控制器设计方案,使用AD模块完成数据采集,使用傅立叶算法进行数据处理,通过CAN总线与监控主站进行通信,完成双电源备自投功能;实验验证了该设计的正确性及有效性,为双电源备自投控制器更新换代开辟了一条高性能低成本途径。  关键词:备用电源自动切换;数据采集;DSP  中图分类号:TP311 文献标识码:A 文章编号:1009-3