基于Hadoop的面向海量交通流数据分析与利用

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:JunKao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着城市机动车保有量的持续增长,交通违章和违法行为越来越多,如多辆车结伴作案、出租车罢工罢运、酒驾等,对城市安全带来了巨大隐患。如何快速识别以上交通行为模式对公安、交警主动预警和事后侦查具有重要意义。此外,针对日益增长的海量交通流数据,传统的处理方法在存储空间和计算效率上已经不能满足用户的应用需求。因此本文重点研究“多车频繁结伴——本文称之为伴随”和“出租车罢工罢运——本文称之为浮动车聚集”两种交通行为模式,并提出了面向交通流时空大数据的伴随模式高效挖掘算法和基于HBase的浮动车聚集模式实时监测算法,然后在此基础上构建基于Hadoop的面向海量交通数据的分析和处理平台。本文在如下方面进行了较为有益的探索:(1)通过对海量卡口过车数据的分析和面向海量交通流数据的伴随车行为模式的研究,首先给出了频繁项集相关概念在伴随车挖掘中的新定义,并在此基础上提出了基于MapReduce的时空大数据频繁项集挖掘算法FSST,实验证明该算法在准确性、执行时间和内存使用等方面优于传统的Apriori和Sequence-Growth算法,最后提出了伴随车的嫌疑度计算方法用于计算伴随车嫌疑大小。(2)根据浮动车聚集行为模式的特征,定义了浮动车聚集行为模式,同时参考基于网格的聚类算法和HBase的数据模型,提出了基于HBase的全天候全域浮动车聚集实时监测算法,定时执行该算法,在真实的、海量交通数据上的实验证明该算法监测浮动车聚集的有效性。(3)实现了上述研究内容的基于Hadoop的交通大数据分析平台,主要包括大数据平台、后台应用程序和前台展示。由于平台超强的计算和存储能力,加上良好的扩展性,后续的交通分析都可以集成到该平台上。
其他文献
目的通过超声检查来评价化癖汤治疗非酒精性脂肪肝的疗效。方法选取120例非酒精性脂肪肝患者,应用化癖汤治疗3个月,通过对比治疗前和治疗后的超声检查结果,分析化癖汤治疗非
新中国成立70年来,中华民族迎来了从站起来、富起来到强起来的伟大飞跃,我国教育事业在党的领导下也发生了翻天覆地的变化。我们要认真总结我国教育事业发展的宝贵经验,深入
痛风和慢性肾病是发病率较高的两种疾病,血尿酸长期的升高是造成痛风的主要原因。而肾脏纤维化是慢性肾病发展的最终结果,因而降低血尿酸和抑制肾纤维化的发展是防治这两种疾
传统科技情报研究选题思路已制约了科技情报的发展。本文将企业战略管理想理论与科技情报选题工作相结合,提出科技情报选题要遵循社会与市场需求、成果导向、逆向思维、开放性
网络木马是目前比较流行的一种病毒,与其它病毒有所不同,它不故意或者恶意地去感染或者破坏其它文件,文章基于这一背景,首先对木马病毒入侵原理和隐身方式进行了分析,在防止
相比于普通的建筑工程来说,石油化工埋地敷设给水排水管道设计有很大的区别.在开展设计的过程中,需要将实际情况充分调查清楚,才能加强设计方案的合理性与科学性,确保给排水
目的探究肝硬化患者血小板相关参数与凝血指标变化特点。方法选择60例肝硬化患者作为实验组,按照肝硬化Child-Pugh分级分成A组(A级, 22例)、B组(B级, 16例)、C组(C级, 22例)
目的了解护士人群人际关系的沟通现状以及沟通技巧的运用程度。方法于第6学期末,对暨南大学教育学院夜大护理学专业专升本2004级学生撰写的93篇《沟通与技巧》课程论文进行总
随着我国工业的不断发展,对石油的需求量在不断上升,石油产品的应用范围也在不断扩大,因此石油化工企业在不断扩大自己的规模。石油化工装置就是石油企业扩大规模的必备工具,
目的研究分析关节镜下射频消融系统治疗急性膝关节损伤的临床效果。方法选取我院于2012年4月至2013年6月收治的20例急性膝关节损伤的患者,给予患者关节镜下射频消融系统治疗,