基于HDFS的小文件管理研究与探索

来源 :宁波市第八届学术大会 | 被引量 : 0次 | 上传用户:planktonli
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  本文探讨了HDFS文件管理模式及其特点,对其小文件管理的缺陷作了分析。针对海量小文件的解决方法就是把众多小文件合并成为一个大文件存储在HDFS中,这样可以大量减少元数据,节省内存空间。要把小文件合并成大文件存储,就需要在HDFS上建立一层小文件管理架构。本文对这种方式进行了探索,并给出了实验结果。
其他文献
在全球碳循环研究当中,土壤碳的变化是最复杂、最具不确定性的部分。由于土壤-大气之间CO2的流量巨大,土壤碳库的微小变化可能显著影响到大气中CO2浓度的变化,并进一步影响全
淄博市是山东省经济较发达地区,政治、经济地位十分重要,但干旱缺水已严重制约该地区经济社会的可持续发展。因此,尽快建设配套工程,及时把长江水引入淄博供水区,最大限度地
近年来多起突发公共卫生事件的暴发流行,暴露出我国医疗卫生体制和机制上存在着一些缺陷[1-3]。目前我国医疗体系与卫生防疫体系各自独立发展,医疗和疾控机构各有工作内容及
会议
请下载后查看,本文暂不支持在线获取查看简介。 Please download to view, this article does not support online access to view profile.
期刊
  目的:观察阿立哌唑治后患者临床症状的改善和COMT基因Val158Met多态性与阿立哌唑疗效的相关性.方法:运用聚合酶链式反应—限制性片段长度多态分析(PCR-RFLP)方法对78例精神
会议
  目的:调查宁波中老年人群糖尿病患病率、知晓率、治疗率和控制率情况.方法:普查某企业7532名40岁以上在职和退休员工的糖尿病史、是否用降糖药和空腹血糖状况,否认糖尿病史
会议
  目的:通过评价精神障碍流行病学调查中RTHD与SCID效度和信度比较,检验RTHD的可理解性、可操作性、可接受性.方法:在精神障碍流行病学调查中,对600例受试对象平行交叉进行RT
会议
21世纪以来,随着全球化经济的快速发展以及对石油能源的急剧需求,在全世界由于海洋石油勘探开发以及运输船舶等诸多人类活动引起的重大溢油事故发生更加频繁。随着我国对外开放
  目的:了解不同情绪面孔刺激下ADHD患儿执行持续注意任务时的事件相关电位特征.方法:ADHD及年龄性别匹配的正常儿童各32例,要求在高兴、中性、恐惧和愤怒等四种情绪面孔刺激
会议
目的了解宁波市某区45~64岁人群空腹血糖和糖耐量分布特征,为中年人群的糖尿病防治提供依据。方法通过横断面调查方法,分层整群随机抽取宁波市某区45~64岁中年人群,进行空腹
会议