云协助文件共享与发布系统优化策略研究

被引量 : 3次 | 上传用户:klzvms1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着云技术的迅猛发展,基于云的网络应用极大丰富。拥有超大规模用户群的P2P文件共享与发布应用如文件下载、流媒体和在线游戏发布等,也开始向云平台迁移,形成了云协助文件共享与发布系统。P2P模式与云服务模式的结合,赋予了文件共享与发布系统众多新特性,例如,可周期性改变系统的云带宽租用量,提供下载预约功能,为用户下载过程同时提供节点辅助和云协助两种加速方式,可短期租用云资源以应对新资源发布初期瞬间激增的下载请求,等等。在新模式新特性的驱动下,对文件共享与发布系统性能优化及成本节约策略的研究,面临着一系列亟待解决的问题:第一,P2P与云协助模式的结合,能否提升文件共享与发布系统的性能?系统需要承担多大的云资源租用开销?影响系统成本的关键因素有哪些?对大规模实用系统展开测量,以解答上述疑问,是云协助文件共享与发布系统优化策略研究急需解决的问题;其次,云协助服务模式下的系统,每隔一段周期可以调整云带宽的租用量,如何使租用量与系统实际的带宽需求相匹配,从而在保障QoS的同时,降低云资源消耗量,是系统优化策略研究中的重要问题。第三,云协助服务模式支持下载预约功能,且为用户的下载过程同时提供节点加速和云加速,如何基于此新特性,提出高效的网络缓存策略,是系统优化策略研究中的又一关键问题。第四,在热门新资源发布初期,下载请求瞬间激增,这种flash crowd现象对云流量的消耗极大,如何基于短期租用云资源时的付费特征,提出云协助文件发布过程的成本节约策略,是系统优化策略研究的又一重要问题。此外,在云协助服务模式下,主要承载文件共享与发布应用的,实际上是分布式云平台。如何结合主营业务的特性,研究云平台的成本最小化部署问题,得出分布式云计算存储资源的最优部署位置及数量,也是系统性能优化策略研究的关键问题,具有重要的学术价值和现实意义。针对上述重要问题,本文展开了全面而深入的研究,主要工作及创新点如下:(1)针对测量研究实用云协助文件共享与发布系统的工作较为匮乏这一问题,本文对其典型代表——QQ旋风离线下载系统,展开大规模测量,根据系统的服务特性,设计了数据采集的主要参量。测量结果表明,云协助模式解决了原有P2P系统无法保障文件可用性,以及无法保障用户高速下载这两大缺陷。分析结果还揭示了影响用户下载过程云带宽消耗量的关键因素。为系统优化打下了基础。(2)针对现有的服务器带宽分配策略不适用于云带宽租用量可变的服务模式这一问题,结合测量得出的下载过程云带宽消耗量主要影响因素,即文件热度、下载启动时段和用户网络连接类型,本文提出了自适应的云带宽租用和分配策略。实验结果表明,该策略在保障服务质量的同时,大幅削减了离线下载系统的云带宽消耗量。(3)针对支持下载预约功能,以及同时提供节点加速和云加速的服务特性,本文研究了适用于云协助离线下载系统的网络缓存方案,提出了在ISP域内同时部署P2P超级节点和缓存云延伸节点的互补式缓存策略。P2P超级节点根据域内P2P网络中的文件紧缺程度决定缓存对象,以增强域内P2P网络的服务能力。缓存云延伸节点根据域内用户下载预约量决定缓存对象,且无需缓存P2P超级节点中已有的文件,以分担域内下载请求对云带宽的需求量。部署后3个月的实际运营数据表明,互补式缓存策略能够实现降低系统云带宽消耗量、提升用户下载速度、削减ISP跨域流量开销的“三赢”目标。(4)针对热门文件发布初期。大规模flash crowd下系统的云资源租用开销过大这一问题,本文首先建立了游戏发布系统的Fluid模型。并借助模型推导了系统的云资源占用时长和云流量开销。然后通过示例分析,发现大小文件同时发布时,系统因无法充分利用用户的上传能力,导致云资源租用开销远高于理论下界。为此,我们提出了文件块主动推送方案,把节点上传带宽不足的文件分块推送给有富余上传能力的“帮忙节点”。最后我们求解最优化问题得出了最优推送策略,并通过效果评估,揭示了推送策略能使云资源租用开销大幅降低且接近理论下界。(5)针对承载了众多热门网络应用的分布式云系统的成本最小化部署问题。本文在揭示了4类主要成本元素之后,基于不改变成本特性的抽象化系统结构,建立了分布式云系统的通用成本模型。然后,针对主营应用特性不同的三类典型云系统,分别构建了最优化问题,并相应地求解得出了分布式计算存储资源的最佳部署位置,以及最优数量。最后,通过讨论揭示了研究成果的实际指导意义。
其他文献
<正>2013年5月~2017年3月,我科采用负压封闭引流(VSD)联合游离髂腹股沟皮瓣分期修复13例足踝部软组织缺损患儿,疗效满意,报道如下。1材料与方法1.1病例资料本组13例,男8例,女5
<正>民主巩固是一个从局部到整体、从维持到深化的长期过程,这一过程包括防止民主中断、避免民主遭到腐蚀、完成民主建设、深化民主等阶段。在民主巩固过程中,不同的战略安排
大型真菌作为天然活性成分的重要来源,其代谢产物种类丰富,具有多种独特的化学结构和生理活性。本实验以食用真菌为研究对象,围绕其抗氧化活性成分的分离纯化,抗HIV-1和免疫
物流运作与营销策略是两种密切相关的企业决策。营销策略是企业通过对产品价格的制定、广告策略的投放、促销策略的实现来刺激和控制市场需求,从而实现企业销售量的提高;而物
Gemini表面活性剂是一类新型的表面活性剂,可看做是传统的单亲水头基单疏水尾链表面活性剂的二聚体或寡聚体。与传统的表面活性剂相比,Gemini表面活性剂具有更高的表面活性以
GPS(全球导航卫星系统)在人们日常生活中的作用越来越重要,它能为我们提供的精确的定位。但是在现实条件下GPS信号十分微弱,很容易被外界有意和无意的干扰,进而不能很好的实现定位
紫外光固化涂料具有固化速度快、环境污染少、能量消耗低、自动化生产程度高、适用于热敏基材等优点,但同时因为存在着大量的缺陷而使其应用受到了限制,主要限制因素为:应用基材
南疆地区的道路路基因为受到了盐渍土冻胀变形的影响,出现了不同程度的损坏及变形,最为明显的表现是有很多道路工程都出现了不同程度的质量问题。论文对南疆寒冬地区盐渍土路
办公自动化教学中采用任务引领的教学模式,通过拟定任务、分解任务、实施任务、评价总结等环节,以电子教室、网络等多种现代化教学手段为主要载体的信息资源,训练"任务引领"模
随着城市化进程的日益加快,城市中出现了越来越多的“村改居”社区,随之产生的一系列问题也层出不穷,大量农村人口在较短时间内转变成了城市人口,身份转变、失地、生活保障等