基于特征匹配的非刚性图像配准方法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:majian_hunu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着近年工业生产效率的提高,以及光学成像和传感器技术的不断发展,机器视觉逐渐取代人工视觉在多个工业领域得到广泛应用,其中常常需要综合多张相关的图像获取更全面的信息。图像配准技术能够用来找到从不同视角、不同时间或不同传感器拍摄的多张图像间的相互变换关系,应用于图像拼接、目标检测、姿态识别和视频监控等多个领域。学者们针对不同应用场合从特征提取与匹配、变换模型估计以及图像重采样和变换等子问题进行了深入研究,但是在自然场景和实际工业电子组装场景的图像中经常出现一些不可控的情况,如光照变化、噪声、尺度变化、遮挡、非刚性形变、运动不连续、模糊和低纹理等,给图像配准任务增加了难度。针对这些复杂情况和图像配准研究现状中待解决的问题,本论文利用了特征匹配的稀疏性和稳定性,从基于模板的场景分析和多视角分析两方面着手,对图像间相似度度量、特征筛选、变换模型估计、形变约束等进行了深入研究,提出了几种基于特征匹配的图像配准方法,并应用于自然场景的目标定位、图像对齐、图像拼接和电子组装场景的元件定位、电路板图像配准和拼接中。主要研究内容概括如下:针对模板匹配场景中出现的非刚性形变、遮挡、模糊和背景杂乱等复杂情况,提出一种对离群点更鲁棒的模板匹配相似度度量方法。基于候选窗口与模板中图像块表现特征集合的单向最近邻匹配结果,将位置距离最小的匹配图像块作为内点,并将内点形变程度作为相似度度量。然后通过添加权重抑制模板矩形框中的背景点对度量的影响。对该度量进行统计分析,验证其能够反应两个分布的相似性。针对复杂场景下模板与搜索图像中目标存在尺度变化问题,提出一种尺度自适应的鲁棒模板匹配相似度度量方法。通过对候选窗口与模板中图像块特征集合的单向最近邻匹配结果进行统计学分析,研究任一图像块被选为最近邻的概率及最近邻离散程度的期望,发现最近邻匹配结果与候选窗口尺度变化的关系,提出一种基于最近邻的具有尺度不变性的相似度度量。然后将该度量应用于矩形模板和掩模模板两种情况,并提出高效的多尺度模板匹配流程。通过统计分析验证其尺度不变性且能够反应两个分布的相似性。针对自然场景多视角图像拼接易出现平面和直线弯曲的问题,提出一种分层变换约束下自然图像拼接方法。首先基于随机抽样一致算法将特征点匹配对分成多组,每组代表实际场景中的一个平面。然后,结合分组结果和局部拟合残差估计剔除误匹配点来提升匹配点对质量用于估计更准确的模型。接下来根据极线几何约束利用点对匹配结果估计相机的内外参数及场景中平面法向量,并计算一个使拼接结果形变较小的相机视点。最后通过求解网格变换模型获得对齐精确且形变自然的图像拼接结果。针对多视角图像出现的光照变化、颜色变化和低纹理情况,提出一种基于倒角距离匹配的参数化图像配准方法。首先通过聚类方法提取不同梯度幅值的边缘。然后基于倒角匹配方法提出一个网格变换模型的目标函数,包括倒角配准项和平滑项,并根据边缘点梯度幅值添加权重,利用梯度下降法优化网格变换参数。该方法需要结合基于特征点匹配结果估计的初始模型,并提出一个网格点生长精细化策略。提出一种非连续形变下的基于混合网格变换模型的图像配准方法。首先以图像间特征点匹配对为数据在变分贝叶斯线性回归框架下估计混合网格变换模型,并推断混合模型分量个数。然后通过最小化图像重叠区域光度误差来对每个分量模型精确化,提升了配准的准确度。最后,根据对应像素的光度差以及周围特征点和相邻像素的类别,通过循环算法判别重叠区域每个像素所属的分量,以实现图像的最终变换和配准。
其他文献
在现代工业系统中,系统控制器的设计通常都是基于被控过程的数学模型实现的,而该数学模型需要准确地描述被控过程的稳态和动态特性。此外,被控过程的数学模型还可以用来辅助系统的其他功能性设计,例如,过程监控与故障诊断、软测量预测等。对于物理定律清晰的系统,可以利用微积分等数学运算通过理论建模的方式推导得到系统的数学模型。然而,据此建立的数学模型通常比较复杂,需要基于特定假设适当简化模型,以便于实际应用,因
学位
随着信息科学技术的不断发展,工业系统的规模与复杂程度在不断扩大,生产系统在实际运行过程中对系统的性能以及节能需求也日益增加,因此最优控制越来越成为控制领域的一个研究热点。在求解系统最优控制问题的过程中,传统动态规划方法往往受到“维数灾”问题的困扰,为了克服这一问题,学者们提出了自适应动态规划技术。自适应动态规划技术是一种融合了动态规划、强化学习、自适应控制、最优控制等理论与方法的新兴控制技术。该方
学位
随着线性系统理论的日臻完善和应用的日趋成熟,控制理论学界逐渐将越来越多的精力转移到非线性系统理论和应用的研究上来。本论文将围绕非线性系统中的一个理论问题,按照提出问题、发展工具、解决实际问题的路线展开。众所周知,非线性系统理论的一个基本问题是稳定性分析,因为完备的稳定性分析往往是保障各类应用的基本前提。不同于线性系统,尽管经过了几十年的发展,非线性系统稳定性分析的手段依然以提出于19世纪的李雅普诺
学位
自主定位与地图构建是自动驾驶实现高度智能化的基础功能,同时也是自动驾驶车辆稳定运行的基本保障。不仅在复杂多变的场景中实现准确、长期的自主定位对车辆的精准控制和实时导航十分关键,对道路周边三维地图的建立可以直接帮助车辆理解环境信息并进行路径规划,是各大自动驾驶厂商的核心技术之一。而即时定位与地图构建(SLAM)技术是解决该问题的关键技术手段,并在机器人、虚拟现实等领域都有着广泛应用。尽管在这些年SL
学位
遥感成像技术是获取地表信息最有效的技术之一,已被广泛应用于国防安全、精准农业和环境监测等领域。然而,由于内部传感器和外部环境的各种因素影响,观测到的遥感图像会受混合噪声污染和云遮挡干扰,导致图像质量下降,阻碍后续处理分析工作。因此,从观测数据中精确复原原始遥感图像是保证遥感技术有效应用的前提。针对上述问题,本研究以遥感图像的全变分约束为基础,同时利用低秩特性,提出高效的复原方法,旨在解决高光谱图像
学位
当系统模型精确已知,模型参考跟踪能使控制系统无误差的跟踪给定的参考模型,但实际的控制系统都存在参数不确定性。在考虑参数不确定时,相比模型参考跟踪,鲁棒模型参考跟踪具有更强的鲁棒性和抗干扰性,因此鲁棒模型参考跟踪是一种保证闭环系统具有更好跟踪性能的控制方法。世界上大多数物理系统实际上都受到一系列物理定律的支配,例如牛顿定律、拉格朗日方程、线性和角动量定理、基尔霍夫电流和电压定律等。以这些物理定律为模
学位
数字技术的进步使得未经版权所有者授权复制正版数字内容变得愈加容易,在线通讯技术的发展也加速了盗版光盘及文件的传播。虽然数字内容生产商可以利用技术手段抵制盗版,但实施技术管控的同时也损害了合法用户的体验效果。尽管地方政府试图完善版权保护法律,但提高监管效率的难度很大。这些都是造成盗版泛滥且难以管控的原因。此外,社会各界对于盗版的态度也是矛盾的。即使盗版具有潜在危害性,但也具有社会可接受性。数字内容盗
学位
自动驾驶技术是当下热门的研究课题之一。作为自动驾驶汽车环境感知系统中的重要环节,视觉目标检测与跟踪算法的性能很大程度上决定了自动驾驶的稳定性与安全性。相比基于激光雷达的算法,基于相机视觉的算法具有硬件成本低、抗恶劣天气干扰能力强等优势。相比双目视觉算法,单目视觉算法具有进一步降低硬件成本以及节省计算资源的优点,并且当双目相机中的其中一个出现故障时,需要单个相机独立完成环境感知任务以保证自动驾驶车辆
学位
高光谱遥感图像分析已经成为地球监测和空间探索的重要手段。高光谱图像是“图谱合一”的三维数据,包含两个空间维度和一个光谱维度,空间中的每一个像素点对应一条光谱带,且每一个像素点对应一种地面物体,不同种类的地面物体对应的光谱反射曲线也不同,因此高光谱遥感图像可以实现像素级分类。随着高光谱成像技术的不断发展,高光谱图像的空间分辨率和光谱分辨率不断提高,高光谱图像中包含的信息也越来越丰富,促进了高光谱图像
学位
随着电力电子技术的快速发展,功率变流器在电力系统、交通运输、航天、家用电器等领域的应用越来越广泛,是实现高效电能转换的关键设备。为了满足不同应用领域对功率变流器愈来愈高的性能需求,功率变流器相关技术的研究已成为学术界和工业界的研究热点之一,其中控制策略是功率变流器技术研究的核心,直接决定了变流器控制系统的动态性能与稳态性能。需要注意的是,功率变流器往往存在未知的负载以及参数不确定性,并且功率开关器
学位