蓝鲸元数据服务器集群的细粒度负载迁移

来源 :计算机研究与发展 | 被引量 : 0次 | 上传用户:jcmmdq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据应用对信息系统的底层存储提出了极大挑战,其首选方案为元数据服务器(metadata server,MDS)集群架构.MDS集群系统为了实现负载均衡,采用的基本机制为元数据服务的负载迁移.当前主流方案存在迁移时间长,迁移中写相关元数据访问需要阻塞的问题.提出细粒度的元数据服务负载迁移方案,由迁出端恢复迁移机制和细粒度控制迁移机制2部分组成.在迁移过程中,以文件为粒度在迁入端重建迁出端的元数据相关状态结构,并根据被访问状态的类型选择在迁出端或迁入端进行立即响应,而非阻塞操作直到迁移完成.在蓝鲸MDS集群系统上实现了此方案,测试和分析表明,在10 000规模的迁移场景中,迁移时间控制在800ms以下,元数据或状态写入延迟最高为215ms.与系统原方案中90s的固有延时相比,此方案有效解决了MDS集群中负载迁移时间过长的问题,并且极大地降低了迁移过程对正常元数据访问的影响.
其他文献
目的 评价抗核小体抗体 (AnuA)对系统性红斑狼疮 (SLE)诊断的敏感性和特异性 ,并了解其与SLE活动性的关系及与其他自身抗体的关系。方法 用酶联免疫吸附 (ELISA)测定方法检
<正>曝光台北京市食药监局日前在官网上通报2015年北京市食品安全监督抽检信息公告。其中,知名的南方黑芝麻糊的5批次产品被查出大肠菌群超标。不合格的南方黑芝麻糊产品均为
目的研究抗角蛋白抗体(AKA)在类风湿关节炎(RA)的临床意义。方法98例RA患者及70例其他风湿性疾病患者测定血清抗角蛋白抗体,对两组病人AKA阳性率进行比较,并对抗角蛋白抗体与
当前,以全球经济系统的形成为标志的经济全球化浪潮汹涌;经济全球化是把双刃剑,使世界各国特别是发展中国家的经济安全同时面临机遇和挑战;我国作为一个发展中大国,国家经济安全关
随着计算能力的增强、应用课题规模和复杂度的增加,高性能计算机对并行文件系统性能要求越来越高.在海量小文件和大规模并发I/O操作的应用场景中,文件系统元数据的吞吐率成为
本文依据《全国农产品成本收益资料汇编》的数据,根据2000-2013年各省份的蚕茧产量,选出我国六大蚕茧主产区,对各主产区蚕茧生产经营状况的趋势及特征进行描述性分析,并运用D
多媒体运用到数学教学中可将抽象的概念、几何图形的变换过程直观地显示在学生眼前,为学生提供操作示范,便于学生动手操作,培养学生思维能力和口头表达能力。多媒体辅助数学
本文是基于对漆艺镶嵌的工艺、材料、艺术特色的研究,分析镶嵌工艺在现代家具设计中的作用,把镶嵌工艺更好的运用于现代家具设计中。镶嵌工艺作为漆艺技法中重要的表现形式,
运用文献法、问卷法、数理统计法等,以河南理工大学的16名健美操教师作为调查对象,针对该校健美操教师年龄与教龄、学历与职称、性别与专业、科研情况、外出进修学习专业知识
<正> 在信息经济时代,加快企业管理信息化进程,有利于减轻企业管理人员的工作强度和提高企业管理效率,有利于迅速获取企业内部和外部环境信息,及时调整管理决策,提高企业的市