湖北交通运输大数据存储应用平台设计与实现

来源 :测绘与空间地理信息 | 被引量 : 0次 | 上传用户:you17
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对当前湖北省交通运输数据的存储管理与应用瓶颈,结合目前大数据技术的发展背景,本文基于Hadoop生态体系设计与实现了针对湖北交通运输业务的大数据存储分析平台。文中从总体架构、存储结构、扩展架构、数据接入与治理、分布式任务调度的设计实现到平台的应用场景进行了论述,并使用10年的高速公路数据与具体业务场景对平台进行了存储与效率实验。实验结果表明,相比传统关系型数据库,该平台在数据存储、查询计算方面均具有非常明显的优越性。
其他文献
本文基于Barro和Sak-I-Martin的思想分别构建了时间和空间因素的两组收敛模型以考察西部地区制造业的收敛性,通过时间维度和空间维度,对西部地区2001-2018年制造业收敛性展开
大数据时代的来临,掀起了大数据与传统学科融合发展的热潮,探寻“大数据+数量经济学模型”的发展之路势在必行。本文运用文献计量分析,对大数据时代较有代表性的定量研究方法
作者在撰写科技论文前必须查阅大量的相关文献。一定数量的参考文献不仅可以保证信息来源的全面性,而且反映作者利用和吸收信息的能力;一定质量的参考文献不仅反映作者研究工
敞开式离子化质谱(Ambient ionization mass spectrometry,AI-MS)是近年来兴起的质谱分析技术,可在敞开的大气环境下实现离子化,无需或只需少许样品前处理步骤,具有实时、简
通过分析中药陈皮的农药残留问题开展风险评估研究。采用气相色谱-串联质谱(GC-MS/MS)和高效液相色谱-串联质谱(HPLC-MS/MS)对198批陈皮中的117种农药进行检测;采用点评估方
非变性质谱技术已成为表征蛋白质结构的重要工具之一。与传统的电喷雾喷针(Electrospray emitter,ESI emitter)相比,亚微米电喷雾喷针具有改变离子电荷态分布和降低盐离子加
近年来高压直流输电系统换流站交流PLC滤波器故障时有发生,为查明故障原因,对±500 kV溪洛渡直流输电工程送端昭通换流站交流PLC滤波器的配置方案、滤波性能和定值计算情
实时直接分析(Direct analysis in real time,DART)作为一种原位电离技术发展迅猛,其与质谱联用已成为热门的分析技术并广泛应用于法庭科学领域,如食品安全、爆炸物检测、毒
地方财政支出是推动城镇化进程的关键驱动因素之一,在城镇化水平提高的同时,常伴随着政府财政支出的扩大,而且城乡收入差距也与两者密切相关。本文基于1998-2018年甘肃省数据
党的十九届五中全会提出,要大力发展农村经济。在经济金融化的趋势下,乡村经济的振兴和发展离不开健全的农村金融体系。在普惠金融战略的推进下,近年来农村金融基础设施不断