海量小文件元数据的分布式存储与检索

来源 :空军预警学院学报 | 被引量 : 0次 | 上传用户:hdiell
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对现有分布式文件系统处理海量小文件时存在的主节点元数据处理性能瓶颈问题,提出采用分布式文件来存储元数据,并通过元数据缓冲和Hash映射实现元数据的分布;采用Map Reduce并行程序对元数据检索进行了实现,并指出了并行检索中存在的问题,提出采取局部位图索引对元数据检索进行了优化.最后通过实验进行了验证,实验结果证明,该方法实现了海量元数据的分布式存储与检索,避免了现有分布式文件系统在处理海量小文件时存在的主节点单点性能瓶颈.
其他文献
为利用有限雷达资源实现对多ISAR目标的实时高分辨成像,提出了一种基于压缩感知的相控阵雷达多目标稀疏孔径认知高分辨成像方法.在对目标稀疏特性认知的基础上,构建了基于目标横
鉴于飞机尾流具有独特的多普勒及空间分布特性和较强的雷达可探测性,对降雨条件下飞机尾流的雷达特性进行了研究.基于雨滴参数和尾流速度场模型,建立尾流中雨滴的运动方程,然后数
鉴于传统的多目标分辨算法(C^2算法)通过取多个脉冲近似单脉冲测角来抑制多径效应,通过对C^2算法进行推导分析,对C^2算法在多径抑制中的应用进行了改进,提出了变系数C^2算法.理论分
基于状态空间法,提出了一种稀疏多子阵场景下的超分辨测向技术.该技术利用多个物理阵列的接收数据.应用状态空间法在子阵间进行虚拟阵元内插,从而合成具有等效大孔径的雷达阵列,以
针对对流层散射的辐射源信号侦察中提取低信噪比信号特征难的问题,采用分数阶傅里叶变换(FRFT)提取了对流层散射线性调频信号的调频斜率与载频;在低信噪比条件下,给出了信号初步检
针对预选士官学员机械识图课程教学与汽车专业的需求、学员的学习特点不相适应的现状,构建了突出识图技能要求和专业特点的教学内容体系,以任务形式重新组织教学内容,提出了四位
综合考虑军事理论知识、业务技能、部队作战需求三者之间的关系,根据构建主义学习理论和主题教学方法,结合雷达情报组网系统课程特点,提出了一种以作战效能为主题的雷达情报组网