基于HDFS的小文件存储技术研究

来源 :电信技术研究 | 被引量 : 0次 | 上传用户:wang____jiang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据平台中的HDFS(Hadoop Distributed File System,Hadoop分布式文件系统)文件系统通用性强、稳定性好,生态圈成熟。通过对HDFS文件系统的研究,在分析了海量数据文件的大小、分布、应用等特点的基础上,针对大容量的信息处理,形成了基于HDFS文件系统合并存储管理小文件的模型。在系统已经使用了HDFS的基础上,为保证技术成熟度、节约成本,在HDFS管理大文件的同时,通过合理设计文件存储大小、优化小文件信息管理等方式,在6节点的HDFS文件系统上实现了小文件写速率峰值2GB
其他文献
利用连续值逻辑的语义方法将强半开集的概念引入到不分明化拓扑空间中,并由此出发给出了不分明化拓扑空间中SS-紧性,进而讨论了其性质。
口语教学是小学英语教学的重要组成部分,然而在考试制度的影响下教育者注重理论知识传授请示口语能力的训练,口语表达能力薄弱是小学生英语学习的一个短板。那么,新时期我们
活动是建构学校文化的一种方式,更是学生生命成长历程中的需求。我校以“一切为了学生的发展”为育人理念,以“德高志远,文博武精”为校训,以“训练自强、学习自主、生活自理”为突破口,为学生构建丰富多彩的活动平台,让学生在活动中历练心智,敞开心扉,体验快乐,享受成功,陶冶情操,全面提升学生的综合素质。  一、读书活动,让学生明事理  为了培养学生的阅读兴趣,养成良好的阅读习惯,形成较强的阅读能力,提高学生
使用模糊数的联合隶属函数定义了模糊数的积分变换和逆积分变换,证明了模糊数在积分变换后的模糊数与原模糊数有相同的支撑与核。另外讨论了在积分变换和逆积分变换下保持不变
【正】 全国高等学校文科学报研究会第二次会员代表大会暨学术研讨会于1992年12月3—7日在桂林广西师范大学召开。来自全国的140多名代表出席了会议。代表们经过充分酝酿商量
不同种类的语言具有不同种类的文化背景,在新闻英语翻译中,翻译者不但要灵活运用语言转换技巧,更要关注于不同种类语言存在的文化背景区别。在根据原文宗旨掌控的根基上,适应
教学过程其实就是原来预设和现有生成不断磨合,驱动学生思维不断前行的过程。学生生成与教师预设在课堂教学中难免会有偏离,这些“意外”之处,就需要教师利用敏锐的感受力去发掘学生隐藏其中的思维宝藏。在苏教版五年级下册《找规律》的教学中,我对此深有感触。  【片段】  操作活动:下表粗线框中两个数的和是3。在表中移动这个框,可以使每次框出的两个数的和各不相同。  [1\
银行的放款,在银行的资产中占有举足轻重的地位.放款若发生呆帐,将会给银行造成损失,有时是无可挽回的损失,甚至导致银行破产.如何防止放款发生呆帐,对商业银行来说,是性命悠
古诗词以其深邃的意境、生动的形象、凝练的语言、丰富的内涵和独特的表现手法成为我国传统文化的精粹,它描绘出“飞流直下三千尺”的壮美画卷,抒发了“但悲不见九州同”的忧国豪情,演绎出“一片冰心在玉壶”的离情别绪,萌发出“不识庐山真面目”的哲学思考……  经过千百年的沉淀,流传下来选入小学语文课本里的古诗,更是精华中的精华。加强经典诗词的习诵,重视古诗词教学,对培养小学生的审美情趣、锻炼记忆能力、培养想象
【正】 魏晋南北朝时期,随着中国进入封建社会及这种社会制度的不断完善和发展,文艺生态学思想的历史进程,也步入了它的第一个高峰期。在这前后三百余年的时间里,文艺生态学