面向不完全数据的填补方法研究与应用

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:yuyu198995
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网和人工智能的不断发展,数据正以指数级姿态爆发。由于种种原因,数据中不可避免地存在大量缺失数据,直接影响进一步的数据分析与挖掘任务,限制数据发挥其最大价值。因此,对于不完全数据填补方法的研究具有重要现实意义。在众多填补方法中,由于基于回归模型的填补方法具有较高精度和良好的可解释性,在高维、非线性的不完全数据的填补任务中展现出强大优势,已经成为主流填补方法。本文主要围绕基于高斯过程回归模型的缺值填补算法开展研究并完成了以下工作:(1)为了有效利用缺值点邻域的完整数据,提高基于高斯过程回归模型的缺值填补算法的准确性,本文在约束高斯过程回归模型框架的基础上,提出三种将梯度约束纳入高斯过程回归模型框架的策略,包括基于虚拟点法的方法、基于扩展矩阵的方法以及基于约束似然的方法,以优化模型在缺值区域内的回归趋势,提高基于高斯过程回归模型的缺值填补算法的准确性。通过数值仿真实验验证了本文所提出的三种方法与标准高斯过程回归模型相比,具有更合理的回归趋势,提供更可靠的预测。最后,将本文所提出的三种改进模型应用在一维和二维缺失数据集填补问题中,实验结果证明本文所提出方法具有更高的缺值填补精度。(2)为了提高高斯过程回归模型中核函数模型对缺失数据区域的感知能力,本文研究了一种随机投影加性核模型,考虑到利用低维子核的加性组合逼近的高维核可能出现信息过载现象,本文提出一种结合注意力机制的投影加性核函数模型,利用完整数据的梯度信息引导投影子核的生成,以增强核模型对缺失数据区域的感知能力,同时增强了模型的可解释性,并降低计算复杂度。最后,将本文所提出的算法应用在二维图像缺失数据集填补问题中,实验结果证明与随机投影加性核函数模型相比,使用本文所提出的核函数模型的高斯过程归回模型对局部数据具有更强的感知能力,能够有效地捕捉数据的局部细节,修补的图像边缘更加合理和平滑。
其他文献
图像盲去噪是指在未知或少知图像噪声信息的情况下,利用已有的退化图像信息恢复得到与原始图像尽可能相近的图像。目前大多数的图像去噪算法都假设加性高斯白噪声的噪声水平已知,但实际上退化图像的噪声信息是未知的,因此假设噪声水平已知的图像去噪算法难以满足实际需求。为了能在噪声水平未知的情况下,灵活地去除退化图像中的噪声,并尽可能地保留原始图像信息,本文进行了以下两方面的工作研究:(1)数据与模型混合驱动的稀
学位
森林火灾是林业最可怕的灾害,事关人类的生命和财产安全。目前,无人机技术已被广泛应用在森林火灾监测领域。尤其是,无人机遥感技术在采集火场数据、预测火灾规模和估计火点位置等方面发挥出巨大作用,显著提高了消防人员对火灾态势的感知能力。开展基于无人机图像的森林火灾识别与分割研究,能够辅助消防人员识别早期森林火灾并估计火灾规模,具有较高的研究意义和应用价值。因此,课题针对无人机森林火灾图像识别与分割,利用深
学位
孤岛交流微电网中作为分布式电源的清洁可再生能源渗透率较高时,并网变流器通常采用下垂控制。由于线路参数不匹配,这些分布式电源输出的无功功率不能按容量比例进行分配,不仅降低了电源的利用率,甚至会引起无功环流。另外由于微电网中采用下垂控制的分布式电源不能等效为PV、PQ或平衡节点,因此无法直接基于传统的潮流算法进行微电网的潮流优化。本文首先通过分析两种连接形式的分布式电源之间无功功率的分配机理,给出在下
学位
遥感是空间信息技术中获取数据的主要来源,同时也是获取军事信息与情报等重要数据的来源。一般来说,从遥感卫星传感器上获取的遥感数据是无法直接进行使用的,需要经过某些技术的处理和解译后才能成为具有应用价值的信息。近年来,遥感卫星技术的迅速发展使得所获得的遥感数据具有海量、高分辨率等特点,但由于传统的解译方法存在着不能将海量高分辨率遥感图像中所包含的有价值信息充分利用的问题,因此对于高分辨率遥感影像智能解
学位
运载火箭是人类目前探索宇宙的关键运载体,其能否安全稳定的运行直接决定了飞行任务能否顺利完成。高精度完备的弹道信息为其飞行任务决策,安全控制、飞行引导等提供了重要保障。在现代飞行任务中,为获取高精度的弹道信息,外弹道测量系统通过多种、多台测控设备来联合测量得到火箭飞行的多种状态信息,然而对于多输入状态信息,少输出弹道信息的情况会产生冗余信息。因此,针对外弹道测量冗余信息,需要研究外弹道测量数据融合处
学位
随着社会的发展和科技水平的不断提升,机器人技术的研究与应用已进入了崭新的阶段,其研究价值与研究意义得到了各个国家的重视。目前,在各研究领域中都可看到移动机器人的身影,此外,移动机器人的自主探索与环境重建任务也引起了众多学者的关注。虽然这些技术已取得了一定的成果,但是仍存在许多技术难点。例如在室内环境未知的情况下,如何使机器人进行高效的自主探索并构建相关环境地图,仍是移动机器人领域的重点关注问题之一
学位
交通基础设施是指为保障交通系统安全正常运营而建立的基础性工程设施,由公路、桥梁、轨道、隧道、高架道路、车站等构成。其中,路桥是交通基础设施最重要的构成部分,对促进国民经济、推动社会发展有着巨大作用,是城市正常运转的“大动脉”。随着设施投入使用年限增加,受天气变化及外界荷载长期作用的影响,路桥等基础设施难免出现异常振动及裂纹损伤等隐患,如果没有及时发现并进行修复,轻则影响行车、行人的舒适度,重则影响
学位
目前,随着半导体行业迅猛发展,用于半导体产业的硅材料需求不断增加。同时,对芯片集成度要求也日益增长,这对硅单晶品质提出了更高的要求。Cz法是制备硅单晶过程中最主要的技术方法。为了生长出大尺寸、高品质的电子级硅单晶,研究Cz法硅单晶批次生产过程中直径和热场温度的建模与控制过程具有重要意义。硅单晶生长过程是典型的批次生产过程,存在批量化、品种多样、工艺复杂、技术密集等特征,且该生长过程是处于高温、多场
学位
高分辨率图像为人类提供了丰富的信息,促进了安全监控、医疗诊断、登月探索等领域的快速发展,但由于采集和传输等过程易受成像设备限制和外界环境干扰,导致获取到的图像分辨率低,因此图像超分辨重建技术应运而生。得益于深度学习强大的特征学习能力,基于深度学习的单幅图像超分辨重建方法层出不穷并且获得了较好的结果,但仍旧存在一些问题:现有方法常用的线性退化模型无法准确刻画真实场景图像退化的高度非线性特征,致使深度
学位
空分系统属于一种复杂化工生产系统,由多个具有不同功能的子系统组成,其中最受关注的是用来制备产品氩的精氩子系统。该系统在生产过程中常因冷凝设备热源供给不足,导致冷凝物料含量增加,最终造成空分系统发生“氮塞”故障。“氮塞”故障不仅在空分系统中频繁发生,且会对整个系统造成严重影响,如大量的物料浪费、巨大的人员伤亡损失等,因此需对空分系统中的“氮塞”故障展开早期故障预警研究。对空分系统的故障预警研究通过故
学位