基于Hadoop平台的高可用性云存储系统的设计与实现

被引量 : 0次 | 上传用户:goodshape
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
黑龙江省人力资源和社会保障厅从事社会保障和保险已经多年,依托工业和黑龙江省经济的发展,在信息化领域的建设上取得了很大的成就。现在黑龙江省人力资源和社会保障厅的社会保险业务的涵盖范围已经由原来的传统“五险”扩大到包含征地失地农民养老、农村养老、城镇居民养老和医疗、个体参保及老年居民补贴的全社会保险,服务对象则由原来的仅有地市级城市的企事业单位职工扩大到县乡级别的城乡居民;因此,现实对黑龙江省人力资源和社会保障厅的行政能力要求也在提高。信息化系统依靠设备更强大的性能提升工作人员的工作效率,随着信息化的不断深入,社会保险数据的积累总量也在迅速的增长。社会保险的数据是黑龙江省人力资源和社会保障厅的最重要的数据之一,它的安全直接关系着人民的基本利益,社会的安定和谐以及社会保险业务的开展。因此,为了保证数据的安全,对于社保数据建立可靠的数据保护方案已经迫在眉睫。本文通过对系统需求的全面分析和对技术实现可能性的评估,决定采用C/S体系进行系统的开发。系统使用的是java语言,采用Hadoop架构和swt编写其外壳,特别地,针对社保验证和管理系统的需要,引入了SQL解析器,既可以控制用户的使用,还可以简化进一步的开发成本。整体系统的开发是在Ubuntu Linux环境下使用Eclipse进行开发,本地服务器采取Jetty,数据库由本身实现。本文的研究内容主要包括三个子系统:集群存储系统、管理员管理系统、用户服务系统。集群存储系统分为Namenode和Datanode两个模块,并且在此之上实现了高可用性的配置,对于主节点Namenode增加了一个备份节点即从Namenode,以增加容错功能。当发生单点故障时,采用Paxos算法,进行从主节点Namenoded到Datanode的切换。这样系统的容灾配置可以提供高可用性的数据存储并且有防范单点故障的功能;管理员管理系统可以运行在管理员的个人电脑上从而可以让管理员登录集群,配置、监控并管理集群的状态,对集群的数据进行读写或备份还原,对集群的节点进行调配,并且管理社保用户的状态。用户服务系统是云存储的系统和用户现存的系统的对接,可以为社保终端机用户提供鉴权和社保数据的读写功能。通过对本课题的研究,已经实现了社保管理系统对存储系统的需求功能。目前系统已经完成功能测试和性能测试,并在公司进行了系统的功能测试以及和原有的金保系统的集成测试,符合预期的需求。系统现已投入到生产运行当中。
其他文献
随着知识经济时代的来临,“信息化”已逐步成为现代企业在竞争中谋求生存与发展的重要手段。我国在企业信息化领域内的发展起步较晚,始于上世纪七十年代,经过几十年来的学习与摸
目的:对以经皮穿刺椎体成形术(PVP)治疗骨质疏松性胸腰椎压缩骨折的临床随机对照试验进行严格质量评价和综合分析,系统评价其效果及不良反应,以期为临床治疗提供循证医学依据
目的:通过Hulth方法建立兔膝关节骨关节炎(KOA)动物模型,观察富血小板血浆(PRP)对兔KOA动物模型关节软骨组织形态和显微结构的改变,关节软骨中Ⅱ型胶原、蛋白多糖、MMP-13及m
目的本实验通过X线、组织形态学(石蜡切片、硬组织切片、扫描电镜)、Micro-CT观察筋膜包裹的国产多孔钽植入骨缺损后“钽—骨”界面的生物相容性和骨修复能力,探讨筋膜包裹的
在湘西土家族人的心目中,一个婴儿的诞生只有通过诞生仪礼,才能成为真正意义上的“人”。育儿礼俗,寄托了人们对美好未来的追求,是民族个性与地方特色的标志之一。故土家族的
期货市场是社会主义市场经济的重要组成部分,在国民经济中发挥着价格发现、规避风险的重要功能。对期货价格的有效预测,有利于掌握期货价格变化的规律,正确引导投资和保值,合理配
目的:微等离子束是一种独特的通过微剥脱射频技术传递射频能量的微小等离子体集束,可以剥脱和穿透皮肤组织,在治疗区域内造成可控深度的少量热损伤及在皮肤上形成聚焦的微创
近年来,随着制造业企业的不断发展壮大,ERP系统已不能满足日常企业对供应商协同的需求,因此制造业企业越来越需要拥有一套适合供应商协同流程且满足自身行业特点的信息管理系统,
研究目的:本文旨在研究股四头肌功能锻炼对不同病因的膝骨关节炎患者的康复治疗作用比较。原发性膝骨关节炎、类风湿关节炎合并膝骨关节炎患者进行短期的股四头肌等长、等张
为构建完善的惩防体系,江苏实施权力运行监控机制建设,其通过优化权力流程,"绘制运行图、找准风险点、明确操作人、落实监控法",以达到权力在内控中规范,在阳光下运行,在网络上