基于磁盘介质缓存的蓝鲸Windows客户端的性能优化研究——基于非线性编辑应用领域

来源 :中国科学院计算技术研究所 | 被引量 : 0次 | 上传用户:lnawxu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着集群技术和网络技术的飞速发展,网络存储系统成为解决集群I/O性能瓶颈的主要手段之一。集群文件系统作为网络存储系统的核心技术,很好地解决了传统文件系统中存在的性能、容量、共享、可扩展性等问题。但是在实际使用中,随着客户端数量的增长,存储设备所能提供的带宽不能随着客户端节点的增长而线性增长,直接导致客户端QOS低下,严重制约了集群文件系统的可扩展能力。   为了改善蓝鲸集群文件系统的可扩展能力,本文结合蓝鲸文件系统在非线性编辑应用下的特点,提出在客户端上实现基于磁盘介质的缓存的解决方案,使得客户端节点的数据访问尽可能地发生在本地,减少对存储服务器的随机访问,有效地减轻后端存储服务器的I/O负载,从而提高整个系统的扩展能力。   本文分析了在非线性编辑应用下制约蓝鲸文件系统可扩展能力的瓶颈,结合应用节点在非线性编辑应用下的数据访问特点,有针对性的选择客户端缓存算法和缓存策略,并且详细叙述客户端缓存系统的设计方法及实现细节,最后给出性能测试结果。   论文取得了如下主要成果:   1)提出一种基于I/O Trace的蓝鲸系统应用节点数据访问模式分析的方案应用模式和数据访问特点的分析是理解系统行为、解决系统瓶颈的基础。对I/O Trace本身进行分析和统计,有助于掌握系统中应用节点数据访问的特点和规律。基于I/O Trace的性能测试方法具有操作简单、控制灵活的特点,能迅速完成一次测试行为,极大的便利了测试的过程,又不失测试的准确性。   2)选取一种适合于蓝鲸系统的客户端缓存算法和整体缓存策略   根据非线性编辑应用模式和应用节点的数据访问特点,定制缓存算法和缓存策略加以利用,一方面有效提高缓存的利用率,一方面尽可能地减少给后端存储服务器的I/O压力。   3)实现基于磁盘介质的Windows客户端缓存系统   蓝鲸系统采用基于磁盘介质缓存的客户端,在非线性编辑应用下最大可以提高近80%的可扩展能力。
其他文献
近年来,随着无线通信技术的不断发展,无线局域网已经得到了越来越广泛的应用。而高密度部署的无线网络便成为了发展的新方向。AP(无线接入点)是工作在由无线频谱所划分出的信道
人体姿态检测,即通过计算机在一幅包含人体的图像中自动地检测出人体,即输出人的整体或者局部肢体的结构参数,如人体轮廓、头部的位置与朝向、人体关节点的位置与部位类别。人体
新的计算模式,普适计算和全局计算,正在作为高度分布式和移动计算的计算模式展现出来。这篇论文探讨了在抽象层面上支持这些新型计算模式的适合的形式化基础,关注在进程移动单位
随着计算机技术的迅速发展,图像、声音等多媒体数据已经成为信息处理领域主要的信息媒体形式。特别是视频数据,由于能记录、再现空间和时间上的各种信息,使得人们能更加方便地获
串联质谱(Tandem Mass Spectrometry)是蛋白质序列鉴定的重要方法,其目标是从实验质谱来推断未知肽段的氨基酸序列。在此过程中,如何从一个肽段序列精确地预测出对应的理论质谱
虚拟机就是由真实机器和软件所组成的一个虚拟环境,虚拟机及相关优化技术的研究,在遗产代码移植、硬件设计、程序性能提高、网络应用、系统安全等方面都有重要的意义,已经成为是
继续表示程序在某个执行状态下的剩余计算抽象。继续在计算机科学的各个分支中都有重要的应用。本文讨论继续在程序设计语言中的理论与应用。   继续传递风格(CPS)变换是
本文研究了计算复杂性中的几种归约方法,应用它们刻画了一些计数问题的计算复杂性,或者给出了多项式时间算法,或者证明其是#P完全的;研究了匹配线路和匹配门的性质。   多项式
随着Internet规模的扩大和网络应用的普及,网络安全问题日益突出。为了实现对敏感数据的保护,同时打破企业内部网的职能范围在物理位置上的限制,虚拟专用网(Virtual Private Net
中国的海岸线长度超过18000公里,频繁的遭受暴雨、雷暴等强对流天气的侵袭。这些自然灾害往往给社会和经济带来巨大的损失。中尺度对流系统(Mesoscale Convective System,MCS)