基于航海大数据的航道拥堵状态识别研究

来源 :哈尔滨工程大学 | 被引量 : 0次 | 上传用户:a263537545
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据的研究一直是当前和未来的发展方向。大数据技术的出现,立刻引起了航海业的注意,希望借助大数据技术解决航海信息挖掘方面存在的问题,更好的掌握和运用航海数据资源。本课题正是在这样的研究背景下应运而生。本文在透彻理解航海大数据内涵的基础上,深入地分析航道拥堵问题,探索应用航海大数据解决航道拥堵识别问题,提出了一种Spark-DBSCAN的航道拥堵识别方法。并通过实验验证了应用该方法处理航道拥堵识别的可行性和有效性。首先,给出航海大数据的定义,论证为什么航海数据能称为大数据,并详细陈述航海大数据的构成、特点及面临的问题,介绍航海大数据的应用现状及大数据计算平台Spark。描述航道拥堵问题并给出了该问题的国内外研究现状。分析了运用航海大数据中的AIS数据进行聚类来识别拥堵航段的可行性。其次,概述现有的基本聚类算法,针对大数据的特点,提出适用于扩展到大数据应用领域的聚类算法的要求和标准。对应提出的标准,对比分析所列举的聚类算法,并结合课题的应用背景综合考虑,最终选择DBSCAN算法。再次,阐述DBSCAN算法的基本原理,具体分析了 DBSCAN算法的特点以及将其用到航海大数据聚类所需要改进的地方及改进方案。设计了基于Spark框架的DBSCAN并行算法(Spark-DBSCAN),逐一分析该算法数据分区、局部DBSCAN、重新标识聚类结果等方面问题,并给出了算法的具体操作流程。最后,搭建Spark集群的实验环境,通过在几组常用的聚类数据集上,与传统DBSCAN算法的聚类结果进行对比,说明本文所设计的Spark-DBSCAN算法在保证聚类质量的同时,大幅度得提高了 DBSCAN算法的聚类速度,验证了 Spark-DBSCAN算法的并发性和正确性。将Spark-DBSCAN算法应用到实际的航道拥堵的问题分析中,取得了较好的实验结果。实验验证了本文所设计的Spark-DBSCAN方法,可以有效地进行大数据聚类,识别拥堵航道。
其他文献
随着国民经济和现代化工业的发展,一种能够实现多种保护功能的智能综合电动机保护装置显得尤为重要。   本文研究和设计了一种基于DSP56F807的电动机保护装置。首先介绍了
本文研究了磷酸铁锂电池充放电特性和电池电量的估算方法,采用分布式采集并集中处理的系统结构,设计了电车电池监控系统。实现了电动车用锂电池单体及整组进行实时监控、充放
为了满足日益复杂的嵌入式系统的设计需求,产生了嵌入式操作系统。微处理器的功能日益强大,嵌入式操作系统的涉猎到的应用范围也变得日益强大。近年来,对于基于特定嵌入式操
目标跟踪作为水下无人航行器(Unmannd Underwater Vehicle, UUV)实现海底管道检修、港口防御、情报搜集、对接回收、时敏打击等作业任务的关键技术,具有广泛的应用前景。本文
在风力发电相关技术研究中,由于存在环境、天气、费用等很多因素,不便进行现场试验,在实验室内构造风力发电技术的模拟仿真平台就变的很有必要。重点是在实验室中如何构造模
随着经济的快速发展和人民生活水平的不断提高,人们对电能的需求与日俱增,传统的电能管理方式已经不符合现代化管理的要求。各个供电力公司为了提高企业的现代化水平和竞争力
不依赖卫星导航的全自主导航模式一直是船用导航系统的研究热点,以惯性/星敏感器为基础组合方式成为近年来的研究热点。该组合模式不仅可以避免依赖卫星的传统方法,还可以保证
燃烧优化技术是实现过来低污排放和高效燃烧的最经济方法之一,也是提高机组经济型,安全性的重要手段。在进行锅炉燃烧优化时,要采集多个反映燃烧特性的参量,实时监测锅炉运行
大型单元机组协调控制系统是提高电厂经济效益,实现电网调度自动化的重要环节。由于协调控制系统是一个复杂的多变量控制系统,系统存在着不确定性干扰和非线性特性,锅炉侧存在着很大的滞后,且锅炉侧与汽机侧存在强烈的耦合特性,所以其控制器的设计存在一定难度。鲁棒控制是处理不确定性问题的一种常用有效的方法。但是当系统外部环境或系统参数发生较大变化时,系统的控制品质将受到影响;而传统的自适应控制器的设计也是基于一
随着科技的进步和电力工业的飞速发展,大容量、高参数的超超临界机组成为我国火电的发展方向,但其具有非线性、参数时变、大迟延等特性,与亚临界汽包炉相比,在控制上具有很大