多云存储系统缓存策略研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:identitymatrix
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代的来临,公有云存储以其低成本、大容量和可扩展性强等优势得到广泛应用,但其无法保证服务质量和数据安全性,企业为保证数据的安全性和可靠性搭建私有云存储,但因用户需求的波动,经常出现存储能力不足或过剩的问题。结合私有云存储的安全、可靠、响应快和公有云存储的低成本、大容量、可扩展性强,多云存储系统应运而生。另一方面,云存储访问受限于网络带宽和网络波动,导致数据访问延迟大,通过缓存减少网络延迟在多云存储系统中为用户提供更好的存储服务体验。针对云存储访问高延时、高成本,设计并实现提高用户性价比的多云存储系统,该系统通过构建一个高可扩展的多云存储管理平台对多个公有云和私有云存储服务进行管理,实现并发向多个云存储上传、下载和删除文件的功能。设计一种多云监控和存储调度方案,监控当前网络环境下各个云存储服务性能,根据用户需求和不同云存储服务特性设计合理的调度策略,为用户提供高性价比的存储服务。为节约下载成本、提高下载带宽,结合本地空间和私有云存储空间,设计数据缓存;提出最小权重缓存替换算法(Least Weight Replace,LWR),该算法综合考虑文件使用频率、文件访问流逝时间、文件大小和文件下载价格,计算文件的权重,该算法符合云存储环境下用户的访问特性。测试表明,多云存储系统实现了高并发的上传、下载和删除文件的基本功能;同时对引入LWR缓存替换算法的数据缓存策略进行性能对比测试,测试结果表明采用该策略后,相比传统云存储缓存策略,在文件访问命中率和节约费用开销方面都有优势。
其他文献
随着海量数据的产生,对数据的存储和访问性能要求越来越高。在分布式文件系统中,元数据访问是数据访问的必经之路,并且在所有访问中,元数据的访问占了50%以上,因此提升元数据
随着半导体技术的飞速发展,闪存的生产成本随之下降,基于闪存的固态盘(SSD,Solid State Drive)技术在存储系统中的使用越来越广泛,相比于传统的机械式硬盘(HDD,Hard Disk Drive),SSD没
大数据时代对于应用多样性的需求和存储数据爆炸式的增长使得数据中心面临提高性能、降低能耗、增强扩展性和灵活性的挑战。以太网光纤通道(FCoE,Fibre Channel over Etherne
本论文是结合电力行业具体解决方案的研发而完成的。解决方案要求实现自动化综合监控系统,实时监控现有其它服务程序和系统资源的运行状态,并根据预先设定好的规则触发相应动作
答疑解惑是教学过程中不可缺少的环节,如何在Internet环境下设计具有自动答疑功能的网络自动答疑系统,成为当前智能教学的研究热点。目前国内外在这方面做的工作,主要集中在如何
随着信息科学技术的高速发展,每年需要收集并存储的数据量越来越多。根据研究机构IDC的相关统计与预测,每年产生的数据量将保持50%的增长速度,单节点存储技术已难以满足这种
增强现实(Augmented Reality,简称AR)可以将虚拟的物体合并到现实场景中,并能支持用户与其进行交互,它已经成为虚拟现实研究中的一个重要领域,也是人机界面技术发展的一个重要方
基于位置的业务(LBS--Loeation Based Service)LBS作为3G网络的最重要增值业务之一,是通过GSM/GPRS网络获取移动终端用户的位置信息(经纬度坐标),在电子地图平台的支持下,为用户
伴随着计算机网络在应用中的日益普及,越来越多的研究机构与软件厂商纷纷在工作流管理系统的研究与开发方面投入了大量的人力与物力,由此形成众多各具特色的工作流产品。工作
本文针对电子政务发展过程为公众提供一站式服务和协同工作中数据交换的需求,提出利用Web Service技术建立数据交换平台,用统一的方式,实现各系统之间不同结构和格式的数据的相