AIS系统时空数据异常检测研究

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:leonoox
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
海洋船舶在生产活动中产生了大量的时空轨迹数据,海量的船载AIS系统时空轨迹数据集合中蕴含着大量的船舶交通行为特征,在进行轨迹信息挖掘时存在诸如海量数据、数据缺失、数据稀疏、数据碎片化以及潜在关联关系难以挖掘等问题,异常轨迹湮没在大量的正常航行轨迹以及噪声数据中,并且由于船舶的位置状态等实时更新,蕴含的丰富的关联关系隐藏在海量行为的碎片化数据中。如何有效检测海量AIS系统异常轨迹,构建准确高效的轨迹异常监测系统,对港口安全规划、海洋交通安全机制等的发展都具有重要的实际指导意义和理论研究价值。针对上述存在的问题,本文取得了以下创新性成果:  一、针对AIS系统时空轨迹数据中存在的如缺乏语义描述,数据缺失、数据冗余等数据质量问题,对AIS数据进行数据预处理,提出了基于时间信息和空间信息的、改进现有的基于相似度的数据预测方法对缺失信息进行预测。通过基于时间感知的历史轨迹和参考轨迹相结合,对缺失数据进行动态性建模,并利用同类型船舶历史轨迹及其他类型船舶的历史轨迹数据进行修正,从而获得更精确的缺失轨迹数据预测结果。  二、针对海量AIS系统时空数据在进行轨迹数据异常检测时存在计算复杂度高,计算开销太大,结果难以确定等问题,提出了一种基于密度偏倚抽样的异常检测算法,该方法在不改变原始轨迹数据信息的情况下同时实现了对海量时空轨迹数据的异常检测。利用变换函数对时空轨迹数据进行降维处理,并通过基于哈希的密度近似估计进一步降低了相似性计算的难度;同时针对不同的应用场景,利用基于密度的异常轨迹检测算法和基于局部距离的异常轨迹检测算法,增强了算法的可扩展性。  三、针对海量AIS系统时空轨迹数据存在的轨迹数据异频采样、数据冗余等数据质量问题以及异常检测时的数据稀疏性、时间周期性和算法冷启动等问题,考虑到船舶航行规律性,提出了改进的轨迹分段压缩算法以解决数据质量问题,已有算法存在缺乏时间信息和空间信息以及易受噪声、数据异质性影响等问题,提出了改进的基于协同过滤的时空轨迹异常检测算法,设置指数衰减函数建模轨迹相似度计算的时间动态性,同时融入不同类型船舶的历史数据以及船舶航行行为进行相似度计算,以解决可能存在的时间周期性和算法冷启动等问题。  四、针对上述处理海量轨迹压缩算法中存在缺少船舶航行状态和航行行为的考虑,以及异常轨迹检测时经验性指数衰减函数失效的情况,提出了一种基于船舶航行特征的轨迹压缩算法,同时和参考轨迹数据相结合,提出了一种改进的基于随机游走模型的时空轨迹异常检测机制来缓解轨迹数据稀疏性对异常检测的影响,在已有稀疏轨迹数据的基础上,为被检测轨迹寻找更多的直接的和潜在的相似轨迹,利用潜在相似轨迹信息获取更为准确的相似度值,从而得到更为精确的异常轨迹检测结果。  五、针对已有的实时轨迹异常检测算法存在时间滞后性的问题,本文提出了一种基于隐马尔可夫模型的实时轨迹异常检测方法,通过对船舶航行状态的基于概率的实时预估,并对超过给定阈值的船舶航行状态进行预警,建立船舶实时监测系统。利用计算得到的历史轨迹数据集中船舶航行状态特征之间的转移概率,通过数据转移概率即船舶航行状态特征之间的相关关系和隐马尔可夫模型得到全局最优,最后通过利用贝叶斯推论完成船舶航行特征预估。
其他文献
随着无线移动通信技术日新月异的发展,通信业务已经得到了普遍的应用,极大的改善了人与人之间的交流。随着业务的普及,人们对通信业务多样性和质量的要求越来越高,要求能够随
近些年来,各行各业对数据管理系统的需求与日俱增,开发出了大量基于C/S和B/S的数据管理系统,并被应用到实际工作中。随着系统数量不断地增多,系统规模越来越大,系统中的逻辑
关系数据库是企业信息系统的核心,大量的关键性商业数据都需要由关系数据库来管理。然而随着XML成为数据交换技术的非正式标准,企业在实际应用中对XML数据管理的需求越来越多。
交通大数据作为大数据一个重要分支,与人们的生活息息相关,目前对于路网交通流数据的研究尚浅,而且大多集中在高速路网。由于环境更复杂,影响因素更多,城市路网交通流具有更加复杂
Windows操作系统在桌面领域处于垄断地位,基于Linux的国产操作系统与之相比应用软件较为匮乏,严重影响了国产操作系统的使用和推广。为国产操作系统专门编写应用软件要耗费极大
近年来,随着网络技术的发展与增值业务需求的不断增长,传统PSTN的电话业务已经不能满足网络应用的需求。下一代网络(NGN)在带宽提高的基础上,为视频、流媒体等多媒体资讯业务的
知识在经济增长的地位日趋重要,知识经济是在当今经济飞速发展的情况下,科学技术与其他因素相互作用最终发展的结果。知识经济带来的诸多知识管理问题,这些问题的解决产生了知识
居住健康是近几年来建设住宅小区的核心理念,在满足住区用户心理健康和生理健康基础上,提高住户生活质量,大力建设健康住宅是国家住宅建筑业发展的趋势。随着数据挖掘技术的日趋
随着我国城市规模不断扩大,城市人口日益激增,公共交通信息化建设越来越受到重视。发达国家普遍采用各种信息技术高效管理城市公交系统的业务运营,而我国公交公司管理信息化程度
高层体系结构HLA是美国建模与仿真办公室为了满足大规模复杂仿真系统的需求,提出的一种新型的仿真框架。该框架具有开放性、扩展性、交互性、分布性和可重用性的优点。在2000