【摘 要】
：
GNSS数据量呈指数级趋势增长,Hadoop分布式文件系统(HDFS)解决了海量GNSS数据存储瓶颈的难题,却面临内存占用多、文件相关性差和缺乏优化机制的问题。针对HDFS处理海量GNSS小
【机 构】
：
地理信息工程国家重点实验室; 信息工程大学地理空间信息学院;
【基金项目】
：
国家自然科学基金(41674019);国家重点研发计划(2016YFB0501701);地理信息工程国家重点实验室开放基金(SKLGIE2016-M-1-2)~~
论文部分内容阅读
GNSS数据量呈指数级趋势增长,Hadoop分布式文件系统(HDFS)解决了海量GNSS数据存储瓶颈的难题,却面临内存占用多、文件相关性差和缺乏优化机制的问题。针对HDFS处理海量GNSS小文件效率不高的问题,结合GNSS数据类型、特点以及存储过程,提出了一种新的GNSS小文件云存储方法,优化了GNSS小文件的写入、读取、添加和删除策略。该方法分别按观测文件和解算成果的类型进行合并,对合并后的文件构建压缩Trie树索引,索引切分后,根据匹配算法分布式地存储索引块。实验采用国际GNSS服务(IGS)28d的数据和产品进行云存储优化。结果表明,该方法降低了各节点内存消耗,提高了海量GNSS小文件写入、读取和删除的效率,实现了对海量GNSS小文件的高效云存储。
其他文献
典故是一个民族文化的历史积淀,承载着历史赋予的精神和文化财富,是凝练的语言精华。文学作品中典故的运用对于文章色彩、文章内涵的扩展以及文章的韵味和趣味的增加有着重要
从先秦'中和'思想之源、先秦儒家之'中和'思想、先秦道家之'中和'思想、先秦法家之'中和'思想、《黄帝内经》之'中和'思想5方面入
从反射式光纤传感器中最基本的光纤对入手，以光度学原理为基础，建立了该传感器在镜反射时的输出特性数学模型。在此模型的基础上，利用计算机给出了光纤传感器输出特性的仿真结果
目标跟踪是智能视频分析的主要技术之一。目标跟踪即在一段视频中,通过各种技术手段跟踪目标,确定目标在下一个时间点的位置。目标跟踪的步骤基本分为:前景检测、目标感兴趣
微博一夜之间成为网络的新宠,以其特有的方式改变了信息传播的形态。从传播学5W模式的角度对微博这一新的传播活动的传者、受者、信息、媒介、效果五要素进行分析,以期为微博
在古诗英译方面,我国学者大致分为以许渊冲为代表的格律诗体派和以翁显良为代表的散体派。在此从许渊冲诗歌"三美论"入手,通过译诗对比,分析该理论在传承性、综合性和历史性
本报讯记者高红海报道电力行业内控建设有了“顶层设计”。日前，财政部正式出台《电力行业内部控制操作指南（征求意见稿）》，并公开征求意见。$$ 为推动电力行业企业有效建立企
从经济学角度分析,我国城市规划信息管理存在信息不对称引起的市场逆向选择现象,必须加强信号传递、信息甄别的力度。经济学对城市规划信息管理的启示有:信息管理依靠市场,但
科技的不断发展使材料逐渐呈现出多元化的趋势,为建筑装饰设计不断注入新鲜的活力。时代风格不断演化,人们的生活水平不断提高,审美的标准也大有不同。传统的材料多数由手工