蓝鲸元数据服务器集群的细粒度负载迁移

来源 :2014第20届全国信息存储技术学术会议 | 被引量 : 0次 | 上传用户:liujing6633
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据应用对信息系统的底层存储提出了极大挑战,其首选方案为元数据服务器(metadata server,MDS)集群架构.MDS集群系统为了实现负载均衡,采用的基本机制为元数据服务的负载迁移.当前主流方案存在迁移时间长,迁移中写相关元数据访问需要阻塞的问题.提出细粒度的元数据服务负载迁移方案,由迁出端恢复迁移机制和细粒度控制迁移机制2部分组成.在迁移过程中,以文件为粒度在迁入端重建迁出端的元数据相关状态结构,并根据被访问状态的类型选择在迁出端或迁入端进行立即响应,而非阻塞操作直到迁移完成.在蓝鲸MDS集群系统上实现了此方案,测试和分析表明,在10 000规模的迁移场景中,迁移时间控制在800 ms以下,元数据或状态写入延迟最高为215ms.与系统原方案中90 s的固有延时相比,此方案有效解决了MDS集群中负载迁移时间过长的问题,并且极大地降低了迁移过程对正常元数据访问的影响.
其他文献
康特针对未来网络发展的特点和设计需要,研制了RFOG光网络终端OGF8126/OGF8116,该设备采用单光纤或双光纤传送HFC的上下行信号。单纤产品可选工作波长1550nm/1610nm/或1550nm
鸡西矿业集团公司张辰煤矿西三采区3
期刊
<正> 道德与法律一样,是调整人们行为的社会规范。婚俗道德虽是人们对婚姻习俗是否道德的一种评价、判断,但人们常常自觉或不自觉地以习俗为准绳,来评价婚姻,这就使婚俗道德具有独特的意义。
从1988年元月1日起,西方世界最著名的公司之一——波音公司有了一位新的领导人,他就是弗兰克·施朗兹,57岁,俄亥俄州人。他除了担任波音公司的总裁和总经理之外,还接替即将
为探究大气中羰基化合物的质量浓度水平及变化规律,利用滤膜系统(FP)同时采集大气中颗粒相和气相羰基化合物,FP系统由3层47mm滤膜组成,其中,第1层滤膜用于收集颗粒相羰基化合
会议
在美国对于控制化学工业中接触致癌物质已采取了一些措施,提出了要加以管理的14种致癌物质。但是其中可能列入 In the United States, some measures have been taken to c
文章阐述了对发射台技术系统进行软件建模的必要性,围绕发射台的应用实际提出了崭新的建模理念和实现方法,并以合肥市大蜀山台的系统建模为例,给出了一个具体的解决方案。 T
健美运动,犹如一条奇异绚丽的彩带,把两颗年轻的心连在了一起.两块金牌、三块银牌、金光闪烁的奖杯和证书,还有酷爱健美运动的痴情,成了他们结为幸福伉俪的宝贵信物.宋国儒
1982年1月,寒风凛冽.新楼林立的新住宅区小海地,一座中学校舍正拔地而起。一位面容清癯、神采奕奕的中年干部在校舍施工现场了解施工进度。他就是新任命为微山路中学党支部
从发展前景来看,物业管理可以说是一个“朝阳产业”,根据是:量大面广的新建物业需要进行管理,大量存量房产同样需要进行维护和管理,市场潜力大且稳定。据统计,南京现有2万平方米以上