分布式搜索引擎中缓存系统的研究与实现

被引量 : 0次 | 上传用户:hepingweixiao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
分布式缓存技术是在不增加成本的前提下提高WWW系统响应速度的一种有效解决方案。本文依托国家科技支撑计划项目“综合风险防范关键技术研究与示范”,针对项目中综合风险搜索引擎面临的响应速度和搜索效率等问题,开展了分布式缓存系统的研究。重点解决了分布式缓存系统中缓存协作、缓存替换算法等关键问题,并实现了一个分布式缓存系统,该系统已经应用在综合风险搜索引擎中,取得了良好的应用效果。本文主要研究成果有:1)根据综合风险搜索引擎需求以及分布式缓存系统的特点,完成了分布式缓存系统的设计与实现。2)在分析传统缓存协议和搜索引擎特点的基础上,设计了HCC(hotspotscooperative caching)缓存协作机制,HCC采用控制节点和缓存节点分离的体系结构,降低了分布式管理的复杂性,通过将“热点”文档复制到低负载节点,将负载较为合理地分散到多个节点,最终消除“热点”节点。与其它缓存协议在理论上和实验数据的对比表明,HCC在访问延迟、缓存效率和系统开销方面要优于其它缓存协议。3)在分析传统缓存替换算法的基础上,设计了一种基于综合价值计算的缓存优化算法,该算法整合文档大小、访问频率、访问时间间隔和它的最近最久未访问特性,加以综合考虑。与其它缓存替换算法对比表明,本算法的字节命中率和分组命中率要优于其它缓存替换算法。
其他文献
地形学是当今建筑学领域的新议题,当代对地形学的研究已扩展成为一种与设计紧密相关,强调人为的创造性观察和操作,结合实用功能主义和表现主义的设计实验。本篇以设计方法作
简要分析了石化行业大型立式储罐检测技术的现状,介绍了声发射技术的技术原理,以及应用于大型立式储罐的全面检验实例,并提出了推荐的储罐现代综合检测与评价技术的流程。同
目的研究酪氨酸激酶受体ErbB2/ErbB1的小分子抑制剂lapatinib (GW2974)对ErbB2/ErbB1阳性乳腺癌细胞代谢的影响,探讨lapatinib对代谢的调控机制。为揭示lapatinib对ErbB2/Erb
随着现代计算机技术的高速发展,人们越来越关注人机交互界面的可用性和用户使用效率的提高,人机交互已经成为国际计算机界最热门的研究领域。“以人为本”、“自然和谐”的交
委托理财是一种金融创新,为投资者提供了一种新型的理财工具,有利于活跃金融市场、发展经济。近年来,随着金融开放加快、资本市场竞争加剧、国民经济增长和个人财富的增加,个
乡镇企业在我国经济社会发展中占有重要她位,发挥着国营企业难以取代的作用.乡镇企业作为我国国民经济的重要组成部分,同样也处在改革与发展的关键时期,但是人才流失却阻碍着我国
文章对红军长征过程中的“镇雄之战”及之后的回师东进进行了较系统的研究。认为镇雄转兵虽只是长征途中的一次较小的战役,但它却是红军走出困境的重要环节,在整个长征史中具
在全国各地大力推进非物质文化遗产保护、传承及发展的大环境下,较多文论都在探讨曲艺的传承问题。有人提出了高校传承模式,有人认为需要强化传承人的社会责任,激发其传承热
针对备件库存控制策略决策的复杂性,以提高备件分类的有效性,降低库存成本为目标,提出了一种基于DEA备件分类的库存控制策略模型。首先,根据备件使用和管理所关注的不同属性,
混凝土材料广泛的应用于现代建筑中,混凝土自身的优点很多,可以有效地提高建筑的性能,促进现代化结构的发展。近年来,建筑物的高度不断增加,对于建筑物的结构和施工的要求更