基于Hadoop分布式计算平台的车辆监控系统数据的分析与应用

来源 :北京邮电大学 | 被引量 : 1次 | 上传用户:chrisl0708
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的进步和经济的发展,汽车行业也得到了快速发展。伴随着汽车保有量的持续增加,诸如交通拥堵、交通事故频发等众多问题也显现出来,给人们的生活带来许多负面影响。智能交通系统应运而生,其利用互联网技术致力于解决由于汽车数量急速增加带来的各类交通问题。车辆监控系统作为其核心组成部分负责实时记录所监控车辆的各项数据,并且积累了海量的车辆监控数据。目前大部分车辆监控数据并没有得到二次分析利用,本文拟提出一个完整的数据分析方案来充分利用这些历史数据,发掘其潜在价值。根据原始车辆监控系统的数据特点及相关数据分析处理技术的研究,论文采用基于Hadoop分布式计算平台,应用其子项目 Hive和Pig作为数据分析工具的方式,充分利用Hadoop的分布式并行处理能力完成基于Hadoop分布式计算平台的车辆监控系统数据的分析与应用。本文首先完成了车辆监控平台的设计,对企业车辆的多项指标进行实时监控并为后续研究积累源数据。随后根据车辆监控数据的特点设计基于Hive数据仓库的数据分析方式,包括主题、逻辑模型、多维度分析、粒度选择及元数据的设计等。同时完成基于Pig平台实现的灵活性更高,开发成本更小的低复杂度、低执行延迟的数据分析方式的设计,作为基于Hive分析方式的补充,完善基于Hadoop分布式计算平台的车辆监控系统数据的分析与应用。最后通过搭建测试平台对实际数据进行分析处理,验证其在分析处理海量车辆监控系统数据方面的性能优势,并且能够为企业、政府等相关用户提供交通管理方面的决策支持。
其他文献
2010年7月20日,山东临工工程机械有限公司在北京人民大会堂召开了主题为“节能先锋,引领未来”的战略发布会。一向行事低调的山东临工,为何决定高调示人,并且将发布会选在了庄严
在气势恢宏的美国白宫对面,有一间塑料膜和硬纸板搭建的帐篷,虽然白宫的主人换了一茬又一茬,但这座帐篷仍然盘踞在白宫对面,被喻为白宫门前的"钉子户"。主人叫皮奇奥托,是一名
2月1日结束的全国政协常委会第二十次会议传来消息,全国归侨侨眷先进个人、宜兴市精陶集团总工艺师徐安碧当选第十二届全国政协委员,这在宜兴尚属首位。
工程机械产品以其高价值、高技术和对后期服务的高要求迥异于普通的消费品这也使得用户对于销售经理的素质要求日益严格代理商的销售经理在与竞争对手的角逐中往往一招失手满
在分析生命周期评价的技术框架基础上,探讨了LCA中数据收集以及编制数据清单分析中分析范围的确定、产品生命周期流程图的绘制、建立清单分析数据库等问题。
人物形象的塑造在文学艺术史上的地位和重要性不言而喻,人物形象塑造的成功与否直接关系到故事情节的的发展是否精彩。迄今,理论界对人物形象塑造进行了细致深入的探究,其理
本研究利用追踪调查数据考察了不同社会经济地位家庭的学生在研究生教育机会上的不平等及其影响因素。结果显示,不同社会经济地位家庭的学生在研究生教育机会的获得上存在非
团体心理辅导是通过团体内成员的人际交互作用,以发展成员良好适应行为、重建理性认知,提高心理健康水平的专业助人技术,具有经济、高持续性、支持性强等独特优势.文章综述了
<正>"行省"一词,始见于金代,为"行尚书省"或"行中书省"的简称。明昌五年(1194),金廷征发民夫整修黄河、北清河堤防,由于河防工地距金首都很远,中央难以遥控指挥,章宗完颜璟就