面向海量数据库的中间层语义缓存技术研究

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:beginI
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着海量数据库在关键业务领域的应用不断增加,提高查询性能日益成为亟待解决的核心问题。在海量数据库应用中存在大量聚集查询,而对海量数据的聚集查询处理往往非常耗时,所以提高聚集查询的处理效率成为优化海量数据库系统查询性能的关键。语义缓存机制通过重用缓存的查询结果优化查询,是一种提高数据库查询效率的有效手段。随着三层结构的广泛应用,中间层语义缓存机制逐渐成为性能优化研究的热点。但是由于缺乏对聚集查询的有效支持,现有语义缓存机制尚无法满足海量数据库应用对聚集查询处理的性能要求。本文在详细分析语义缓存的研究现状及存在问题的基础上,以海量数据库应用为背景,以建立能够优化聚集查询的中间层语义缓存机制为目标,围绕着基于语义缓存的聚集查询处理、语义缓存的管理和语义缓存的一致性维护等语义缓存的关键问题展开了深入研究,主要工作包括:1.提出了一种面向聚集查询的中间层语义缓存机制。该机制将语义缓存定义为语义缓存项的集合,并将语义缓存部署于中间层,由此结合了传送查询和传送数据的优点,同时通过利用用户查询之间的语义联系有效提高了缓存利用率。2.提出了一种基于语义缓存的聚集查询处理机制。该机制讨论了聚集查询与缓存项的匹配,给出了匹配的定义和相应判定方法,同时研究了不同查询匹配类型的聚集查询处理问题,提出了基于语义缓存的聚集查询处理算法。性能测试表明该机制能够显著提高聚集查询处理的性能。3.提出了一种有效的语义缓存管理机制。首先引入虚拟缓存的概念,将缓存划分为虚拟缓存、易失缓存和持久缓存进行管理,增强了缓存管理的灵活性。然后提出在适当条件下将相关语义缓存项进行合并的处理方法,减少了缓存冗余和维护开销。最后提出了最近周期最少使用替换策略LFURC和基于热区的替换策略RBHR。其中,LFURC通过结合时间因素、访问频率因素以及缓存结构的特点,在替换发生时,淘汰在最近周期内访问频率较低的缓存项;RBHR则基于用户访问存在热区的应用特征,通过综合考虑语义缓存项描述中的多种因素,为语义缓存项设定替换值。性能测试表明,虚拟缓存的引入和语义缓存的合并有效提高了系统性能,LFURC和RBHR与传统的LRU和LRC策略相比具有明显优势。4.提出了一种适用于海量数据库应用的语义缓存的一致性维护策略。首先分析了几种典型的一致性维护策略,然后从缓存项视图增量维护的角度出发研究了缓存的一致性维护,最后针对海量数据库应用的特点,提出了一种定时增量维护的策略以保证缓存的一致性。测试结果表明该策略能够有效维护一致性。5.以国家大型工程-大规模事务处理系统为应用背景,基于本文对语义缓存关键技术的研究成果,以并行数据库中间件StarTPMonitor为基础平台,构造并实现了可配置的中间层语义缓存StarCache。测试和在大规模事务处理系统中的应用表明,StarCache有效优化了海量数据库应用的聚集查询性能,能够满足海量数据库应用对聚集查询处理性能的要求。
其他文献
目的探讨腹腔镜器械切割缝合器(ATB45)在直肠癌低位保肛术中应用的方法和效果。为提高低位直肠癌保肛率探索新的吻合方法。方法回顾性分析17例低位直肠癌患者应用ATB45,在全
文章主要介绍以dsPIC30F5011单片机在风机监控分站中的应用。风机监控分站对风机监控系统中各个设备的运行状态进行实时在线监控,确保风机正常运行。
循环流化床锅炉还具有适用煤种广、负荷调节性能好、灰渣综合利用性能好等一般常规锅炉所不具备的优点,因此得到了广泛的应用和推广,特别受到中小型热电厂的青睐。文章以某厂
车轮啃轨磨损是起重机运行过程中比较常见的运行故障之一,对于起重机的运行应用的安全性以及稳定性都有很大的不利影响和作用。本文主要结合某工厂车间生产应用的起重机设备
一、激活人的潜能的必要性知识经济的第一资源就是智力资源,而拥有智力资源就是拥有了财富.
毛泽东的《七律.有所思》是迄今为止公开发表的最后一首诗,也是内容复杂的诗。本文根据历史背景追溯此诗的创作时间、地点,探讨诗人创作此诗时忧愤深广的心境以及该诗沉郁苍
随着春节和元宵节的远去,鸡蛋价格出现小幅回落。从河北省唐山市的统计来看,市场零售价格由每千克6.2元~6.4元回落到每千克5.6元~5.8元,批发价格由每千克5.9元~6.1元回落到每千克5.3元~5.5元
定理机器证明的研究,在理论和实践上都具有重要的意义。当前,机器证明的理论研究进入低潮时期,自20世纪末以来,国外研究人员尝试将并行计算技术引入到符号计算的一些关键计算问题
<正> 4)将留有 A、B 左半片叶子的枝条插入水中,放在阳光或灯光下照射,进行光合作用,并保持 A 组叶片干净。5)若干(不少于5)小时后,剪下A、B 留在枝条上的左半片叶子,把表面
向量场可视化是可视化技术中最具挑战性的研究领域之一。向量场可视化技术是运用图形学的理论与方法将数据场庞大的数据集所隐含的信息用图形符号及颜色等表示出来,以帮助研究