HDFS中高效存储小文件的方法

来源 :计算机工程与设计 | 被引量 : 0次 | 上传用户:weilijay
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为改善应用Hadoop分布式文件系统存储大量小文件时效率低下的问题,将NameNode职责分离,使用单独的NFS服务器同步存储元数据信息,以降低Client数据请求压力,提供大吞吐量数据访问并改善访问延迟;设计文件与数据块的对应模式,允许在同一块中存储多个小文件,并对系统加以实现,为海量小文件的存储提供了一个有效的解决方案。实验结果表明,该机制可以在数据迅速增长的背景下实现海量小文件的高效存取。
其他文献
针对异常检测系统虚警率高、检测率低以及冗余特征对检测系统造成负担的问题,提出一种基于特征选择和支持向量机相结合的异常检测方法。该方法通过构造一种基于分类模型分类准
美国政府在过去十多年里积极推进燃料电池的应用开发,特别着重投资燃料电池发电设备,已取得长足进展。各类燃料电池都将在数年内陆续投入商业化应用,正是由于燃料电池具有清洁、
黑马山李氏家族墓葬位于平江县江口镇五一村,坐西向东,占地面积180平方米,均为夫妻合葬墓,包括李在明墓和李映元墓,其中李映元墓是夫妻合葬墓,它建于清末光绪年1826年是一座
我国的氮氧化物污染越来越严重,今后燃煤火电厂今后将逐步建设烟气脱硝装置。本文在对SCR脱硝技术进行介绍的基础之上,对影响SCR脱硝效率的主要运行因素进行了分析,主要包括:
<正>人才是富国之本、兴邦大计千秋基业,人才为先。实现中华民族伟大复兴,人才越多越好,本事越大越好。我国是一个人力资源大国,也是一个智力资源大国,我国13亿多人大脑中蕴
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
会议
中国古代赋税政策发生了八次重大的改革,其中不乏有减免农业赋税的政策,这些政策有长期减免赋税以劝农和临时减免赋税以救荒为主,表现出赋税减免政策的周期性、单一性、偏重