Argo剖面浮标数据异常检测方法研究

来源 :桂林电子科技大学 | 被引量 : 3次 | 上传用户:jack332904910
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Argo剖面浮标是目前唯一实时获取全球上层海洋三维观测数据的手段,其观测的数据反映了海洋立体温盐分布的情况,对研究海洋环流、全球气候变化、海洋分析预报系统提供了数据基础,具有极其重要的应用意义与科学价值。本文以Argo剖面浮标数据作为海洋大数据信息安全研究的切入点,针对Argo剖面浮标数据受环境、设备等不确定因素的影响导致数据出现异常的问题,结合Argo剖面浮标数据具有数据量大、地域性、非线性分布、离散等特点,开展了Argo剖面浮标数据异常检测方法的深入研究,为提高Argo剖面浮标数据准确性、可靠性提供理论依据和技术手段。本文针对异常检测的训练阶段与异常检测阶段分别展开分析与研究。首先,在训练阶段,针对Argo剖面浮标数据文件格式复杂、数据量庞大的问题,提出基于MapReduce技术的Argo主剖面生成的AMPC(information fusion algorithm for Argo profile base on MapReduce and Principal Curves)算法。该算法采用MapReduce技术有效地提高执行效率,另外,将剖面信息以经纬度进行分类,增强剖面间关联性,凸显剖面地域特点,并在K-主曲线理论的基础上,使用不断添加拟合剖面点的方式生成主剖面,减少异常检测阶段的数据存储量,为剖面可能存在的点异常、上下文异常、集合异常提供参考依据。其次,在异常检测阶段,汲取基于“三倍标准差”准则异常检测方法与基于预测模型异常检测方法的优点,改进设计一种结合分段“三倍标准差”准则和k-近邻子剖面与主曲线预测方法的基于自适应异常阈值的异常检测方法。该方法以训练阶段生成的主剖面作为参考,综合当前待测剖面点对主剖面的偏离情况与剖面随深度变化的趋势给异常检测带来的影响,动态计算各剖面点的异常阈值,进一步提高异常检测方法的性能与检测效果。验证试验表明:通过全球Argo剖面浮标数据的验证,本文研究的针对Argo剖面浮标数据特点的异常检测方法高效地结合历史剖面数据,有效地规避静态阈值检测的片面性,具有良好的异常检测效果,异常检测的准确度得到明显提高。
其他文献
研究了处在外界非均匀磁场中的两粒子海森堡系统的量子关联特性.我们采用数值计算的方法,详细分析了系统中的量子纠缠(QE)和量子失协(QD)的变化情况,发现这两种量子状态在很大范
这是一所位于东京市郊的租赁式集合公寓,包含15个住宅单元。根据地块的规划条件,建筑的外形追求的是体块的最大量化。虽然邻接的南面场地现在还空着,但考虑到将来附近很快就会建
期刊
在纯拜耳法生产氧化铝的过程中,当流程中草酸钠浓度达到饱和浓度后会对生产稳定性和产品质量带来严重影响,如何稳定流程中草酸钠的浓度是各企业解决问题的关键。本文从影响草
目的对糖尿病前期与脑梗死的临床关联性进行分析研究。方法择取2011年1月—2014年12月在进行治疗的290例脑梗死患者,根据糖尿病前期诊断标准将其随机分成观察组(102例)和对照
随着年龄增加,人体内的有益菌——双歧杆菌数量减少,因此需要摄入双歧杆菌或者双歧因子来增加肠道内的双歧杆菌,维持肠道微环境平衡。由于双歧杆菌具有不耐酸、不耐胆盐等特
以用于工作面顺槽的可伸缩下运带式输送机的运行状态、输送距离等参数为变化量,在其设计、制造及安装等方面都有特殊要求。以伊新煤业21105工作面顺槽可伸缩下运带式输送机设
由于深海氧同位素阶段5时期(Marine Isotope Stage 5,MIS 5)高分辨率的亚洲夏季风记录较少,限制了对该时期亚洲夏季风变化的认识。本文利用重庆金佛山羊口洞石笋的δ18O记录,重
<正>化学实验是化学课程中实施科学探究的基础和主要方式,它对培养学生实事求是、严肃认真的科学态度,培养学生观察、分析和解决问题的能力,培养学生逻辑思维和创造性思维,提
会议
近两年,在煤改电政策的号召和影响下,电采暖市场迅速发展,在清洁供暖的需求之下,空气源热泵、电暖器等产品开始走进人们的生活。经历了三年飞跃式的发展,2019年已经进入了后
本文试图回答以下三个问题:一,宋朝廷给予士人法律的特权的原因;二,宋代士人尤其是士大夫所获法律特权的过程;三,宋士人所获法律特权法律的具体表现。首先,本文试观察宋代的思想、政治及社会背景。在唐末五代武将横行背景下建立的宋朝,一开始就确立了“与士大夫共治天下”的方针;给予官僚贵族特权本是儒家“以礼入法”思想的体现,朱熹等理学家强调尊卑有序是符合儒家思想的;随着宋代科举制度的成熟与发展,士人成为宋代官