云存储中基于动态多中心的分布式文件系统研究

来源 :燕山大学 | 被引量 : 0次 | 上传用户:nihao99520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在大数据时代,云存储是数据挖掘、分析和研究的基础,成为研究的热点问题。分布式文件系统作为云存储中的重要核心,有了新的研究价值。本文综合分析了国内外关于分布式文件系统的研究现状,以增加系统的可靠性与吞吐量为目标,提出了一种基于动态多中心的分布式文件系统架构模型,并针对其中涉及到的关键技术进行了深入研究。首先,针对集中式元数据服务模型存在的单节点失效与单节点瓶颈问题,设计了一种基于动态多中心的分布式文件系统的架构模型。该模型通过采用全对等式的元数据服务模型来提高系统的可靠性与吞吐量。采用N重Hash与分层思想相结合的方法来组织元数据在内存中的存储结构,使用日志策略对元数据进行持久化,并提出了一种基于三重循环链式的故障切换方案。其次,对新模型中的元数据服务器之间的负载均衡问题进行了分析与研究,针对新模型中负载任务的特点,提出了一种带“参谋”的动态自适应负载平衡策略。该策略将负载均衡器与客户端解耦合,收集不同的负载信息指标,并赋予不同权值来处理负载信息,通过自适应的阈值来判定系统的负载状态。最后,对新模型中多节点之间的数据同步问题进行了分析与研究,针对经典的Paxos算法存在的“活锁”问题,提出了一种带Leader选举的Paxos算法;为解决系统中存在的“不一致性窗口时间”的问题,在Paxos算法的基础上提出了一种数据同步方案,该方案采用周期性同步与随机性同步相结合的策略,并设计实现了一个数据一致性原型系统。
其他文献
【正】 长期以来,钢材一直由国家作为生产资料统一分配,不准直接进入交易市场,更不用说进入个人消费市场。其实,钢材既可以是生产资料,又可以是消费资料。它既可以造厂房,也
1设计要求常规电动葫芦多为单吊钩起吊重物,但随着国家加快水利水电、电站及石化项目的建设,与之配套的电动葫芦单吊点起吊方式已经不能满足国家的发展需求,由于国内目前研制
本文主要探讨了一种基于网络的阅卷方式。利用OCR系统,将考生试卷以图像方式录入到计算机,通过网络传至考试中心,阅卷员通过网络得到经考试中心切分处理的试卷进行评阅,并传
针对当前客运索道脱挂抱索器中的弹簧组装配效率低、劳动强度高、可控性差等问题,提出了相应的解决方案,设计了脱挂抱索器弹簧组装配专用设备;该设备的筒形工装可对弹簧组进
【正】 在加速社会主义四化建设的进程中,发展对外贸易和经济交流,占有重要的地位。粉碎“四人帮”后,为了冲破过去闭关锁国的不正常状态,搞活对外贸易,我国运用了国际上贸易
传统村落是在长期的历史发展过程中形成的具有一定社会经济结构的意识形态载体,它延续了传统的街巷风貌和生活方式,具有较高的历史文化和科学研究价值。然而,随着城市化进程
渗透特性是表征黏性土层防渗能力及防污性能的关键控制因素,黏土衬垫渗透系数的正确选择对保证垫层的防污效果具有极其重要的意义。采用柔性壁渗透仪,通过室内试验研究了混合
随着教育信息化的深入推进,海量的教育数据成为监测、分析和优化教学过程的"数据金矿"。近年来,我国连续出台了《高等学校人工智能创新行动计划》《中国教育现代化2035》《教
目的观察甲状腺瘤患者行甲状腺切除术的精细化护理效果。方法选取的40例观察病例为2018年1月~2020年8月期间在我院接受甲状腺切除术治疗的甲状腺瘤患者,依据随机数字表法将所
为了保持大倾角走向长壁综放面支护系统的稳定性和提高顶煤回收率,运用UDEC^20程序和现场观测法,对顶煤破碎及运移进行了研究。结果表明,工作面中上部煤岩破坏范围大,破碎严重,始