基于HDFS的分布式文件系统

来源 :东北大学学报:自然科学版 | 被引量 : 0次 | 上传用户:kxl_cqmu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在现有的开源分布式文件存储系统HDFS上,构建一个智能大数据存储系统IHDFS.该系统提出了大数据去重模块、大数据放置模块、大数据智能迁移模块和大数据编码模块,构造了智能分布式文件存储系统,可以提高用户访问效率,节省集群的存储空间.实验结果表明,数据去重模块很好地节省了存储空间;数据放置模块合理地分配文件上传的存储层,使数据上传速度提高一倍;数据智能迁移模块提高了用户在高等存储层上文件的命中率,提高了用户获取数据的效率;数据编码模块节省了集群的储存空间,节省了大约原来存储空间的三分之一.
其他文献
应用不可逆过程热力学研究木材干燥过程传热和传质及其耦合作用的宏观规律,为制定木材干燥工艺条件奠定科学依据.
根据地下隧道施工不同的开挖程序和锚固施工方法,运用三维有限元数值分析方法模拟地下隧道施工建造过程,以期寻找有利于围岩稳定的开挖和支护方式.依据岩体破坏特性和弹塑性
大学生的心理障碍及对策柯韵徽(合肥工业大学)近年来,大学生的心理健康问题已成为一个引人注目的问题,因各种心理疾病而休、退学的大学生人数已占总退学人数的百分之五十以上。各
研究背景和目的:近年来,针对创伤导致的大面积皮肤软组织缺损,除传统的游离植皮、皮瓣技术、组织工程、皮肤扩张术、干细胞移植治疗等技术外,皮肤牵张技术应用逐渐增多,并取得了良好疗效。皮肤牵张术应用原理是利用皮肤的机械性蠕变性能。然而,皮肤牵张术也存在一些局限性,如牵张程度有限、人体各个部位牵张关闭的极限值不明确、牵张后皮缘坏死等。其中牵张后皮缘缺血坏死(特别是肢体远段皮肤)是限制皮肤牵张术在创面中应用
背景与目的:EB病毒(Epstein.Barrvirus,EBV)感染在鼻咽癌发生中发挥重要作用。本研究的目的在于探讨潜伏的EBV活化后形成的复发感染对鼻咽癌发生过程中全基因组表达的影响。方法:收
农业生产实践证明,优良品种不仅能提高产量,改进品质,而且可以增强作物对不良气候条件和病虫害的抗御能力,达到高产稳产。所以,在生产中,人们都要求有一定的优良品种,以获得
期刊
背景:EIT(electrical impedance tomography)技术是一种通过测量组织表面电流获得内部电阻抗的成像技术,近年来在临床肺阻抗成像、呼吸运动监测以及肺功能保护方面有着广泛的应用。妇科腔镜手术在手术方式以及术中体位方面与传统手术不同,由于头低脚高位和气腹的影响使得肺部通气受限,增加肺部损伤及术后并发症的风险。本研究利用EIT监测技术为接受妇科腔镜手术的患者提供合理的呼气末正
基于ABAQUS有限元软件,采用显式动力学算法对厚规格钢板三维常规轧制与差厚轧制热力耦合过程进行模拟仿真,获得差厚轧制变形区金属流动与应力、应变分布规律,研究常规轧制与
猪伪狂犬病是由猪伪狂犬病毒(Pseudorabies virus,Pr V)引起的猪的急性传染病,是危害全球养猪业的重大传染病之一。本文重点描述生猪伪狂犬病在国内外流行状况,新型伪狂犬病特
借助连杆裂解实验获得断裂接合面,利用逆向工程重构断裂面,建立带缺损的连杆模型,实现连杆断裂面缺损定量描述.探究不同尺寸、不同位置的缺损对连杆强度的影响,以此为依据制