基于各向异性稠密卷积的特征金字塔光流计算技术研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:jj__yy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像序列光流计算是从连续帧图像中估计难以直接获得的稠密像素点二维运动矢量,由于光流既包含了图像中目标与场景的运动参数,还携带了丰富的结构信息,因此是图像处理和计算机视觉领域的一项重要研究任务,研究成果被广泛应用于动作识别、目标检测、三维重建、自动驾驶以及卫星云图分析等领域,具有广泛的应用前景和重要的应用价值。近年来,随着以卷积神经网络为代表的深度学习理论与方法的快速发展,基于深度学习的光流计算技术成为该领域研究的主流方向。虽然基于深度学习的光流计算方法在光流估计的准确性与实效性等方面已取得显著提高,但是由于标准卷积模型在图像边缘和运动边界区域特征提取的局限性,导致基于深度学习的光流计算方法常常产生运动边缘模糊现象。此外,现有的深度学习光流计算方法通常采用基于端点误差的损失函数监督网络模型训练,虽然能够促使网络模型训练的快速收敛,但由于该损失函数仅考虑光流估计的绝对误差,导致训练结果易陷入局部最优。针对以上问题,本论文主要研究基于各向异性稠密卷积的特征金字塔光流计算方法,旨在解决光流计算的边缘模糊和网络模型训练的局部最优问题,本论文的主要贡献包括:(1)针对标准卷积特征提取网络易产生光流计算边缘模糊的问题,本论文首先提出基于各向异性稠密卷积的图像特征提取网络,该网络通过联合多尺度标准卷积的特征稠密度与变形卷积的边缘感知特性,显著提高了图像特征提取的准确性。为了克服大位移运动对光流计算的影响,本论文将各向异性稠密卷积特征提取网络与特征金字塔光流计算网络相结合,提出基于各项异性稠密卷积的特征金字塔光流计算方法,进一步提高了大位移场景光流计算的可靠性。(2)针对现有的端点误差损失函数易导致光流估计网络模型陷入局部最优的问题,本论文提出一种联合全局能量泛函与端点误差的混合损失函数,通过对端点误差损失函数增加基于图像亮度守恒的数据约束项和基于图像梯度自适应变化的正则化项,促进模型进一步收敛,显著提高了光流计算的准确性与鲁棒性。(3)为了验证本论文所提光流计算方法的准确性与鲁棒性,分别采用MPISintel和KITTI数据库测试图像集对本论文方法和现有的代表性深度学习光流方法进行定量对比与定性分析。根据实验结果可以得出本论文提出的基于各项异性稠密卷积的特征金字塔光流计算方法在MPI-Sintel的Clean和Final数据集端点误差分别提升了21.5%和5.2%,在KITTI数据集上平均异常值百分比提升了2.41%。实验结果表明,本文方法具有更高的光流计算计算精度,尤其在图像边缘和大位移运动区域具有更好的鲁棒性。
其他文献
飞机挂架作为飞机与机载装备之间连接的枢纽在航空领域有着极其重要的作用,其性能的好坏直接影响到飞机机载装备系统的正常工作,然而当飞机在飞行过程中,飞机挂架会时常承受机载设备的过量载荷,因此,挂架上极易出现细小的裂纹缺陷。由于挂架表面结构比较复杂且对检测要求有着一定的限制,而目前较为常规的无损检测方法难以满足挂架中的缺陷检测需求。因此,本文提出了一种在地磁场环境下无需励磁的弱磁检测技术,并针对飞机挂架
学位
飞机承力梁作为一种重要的承力结构件,其质量直接关系到飞行安全,对飞机承力部件进行无损检测具有重要意义。本文基于涡流检测原理,结合仿真分析和试验研究两种方法,计算并匹配了线圈阻抗,设计优化了线圈阻抗匹配探头,研究了复材贴敷状态下不同半径扇形缺陷端点处涡流场扩散规律,提出了裂纹尖端辨识方法,研制了以步进电机丝杆带动涡流检测探头运动的自动化扫查工装,研发了基于STM32H743的嵌入式技术控制的测长控制
学位
随着工业现代化步伐加快,铁磁性材料在各工业领域中使用愈加广泛,材料应力集中是铁磁性构件发生损伤的主要原因之一。针对目前铁磁性材料单一应力检测方法存在数据参数随机性强、检测结果精度和鲁棒性差的问题。本文基于巴克豪森(MBN)信号和磁声发射(MAE)信号原理,提出MAE和MBN检测数据的磁-声特征融合方法,利用分布式梯度增强库xgboost机器学习方法建立特征参数模型,实现对铁磁性材料更为可靠的应力测
学位
铜作为最常见的有色金属之一,因其具有良好的延展性、抗拉性以及耐蚀性等一系列优点,在电子电气、交通运输、机械制造等行业中得到了广泛的应用。高纯铜相比于一般的铜材料具有更加优异的物理性能,在高精尖技术领域如超导、航空航天中甚至能被用来代替一些价格高昂的稀有金属材料。随着我国产业升级的进行,各种工程材料服役的新环境也愈加苛刻。高强载荷下非铁磁性金属的应力损伤作为材料损伤断裂的一种典型方式,也是与材料使用
学位
航空航天等领域关键材料或器件,质量要求高,需实施可靠的检测。超声检测具有穿透能力强、检测成本低、材料内部缺陷检测灵敏度和准确率高等优点,得到了广泛的应用。随着航空航天装备性能的不断提升,对缺陷检出量级提出了更高的要求,需实现微小缺陷的检测能力。微小缺陷超声检测与常规超声检测不同,其检出能力受信号采集噪声、图像噪声和各种随机噪声等影响更明显,各种噪声干扰导致不能够正确识别微小缺陷。现有商业化设备只能
学位
为了解决磁声发射检测技术中存在的实验仪器参数设计固定、传统时域信号特征量无法准确反映信号特性等问题,本文在充分分析磁声发射信号影响因素的基础上,优化了磁声发射检测装置;通过对实验得到磁声发射检测信号进行特征分析,提出了基于样本熵的特征提取方法,将其和无量纲指标相结合,构造出抗噪声能力强、受工况影响小的复合无量纲指标。本文主要工作内容如下:通过分析磁声发射检测技术的研究现状,明确了目前磁声发射检测技
学位
涡轮叶片是航空发动机中的核心部件之一,无损检测是控制涡轮叶片生产质量的关键技术,涡轮叶片中微裂纹会在服役过程中受疲劳因素影响而扩展,甚至造成叶片断裂,针对涡轮叶片微裂纹进行无损检测对保障飞行安全性有重要意义。本文以航空发动机涡轮叶片为对象,以涡流检测和X射线成像检测两种方法开展涡轮叶片微裂纹无损检测试验。针对涡轮叶片微裂纹检测问题,首先开展了低压涡轮叶片进气边及排气边微小缺陷的涡流检测研究,确定涡
学位
一般多目标优化问题需要同时优化的目标数通常在2个或3个,当目标数超过3个时,多目标优化问题就会被称为高维多目标优化问题。多目标优化问题的多个目标之间相互冲突,提升其中一个目标的性能往往会使得其他目标的性能下降,无法获得单一最优解,只能获得一组折衷解。另外,随着优化问题中目标数目的增加,如何有效平衡收敛性和多样性也是一个难点。针对处理高维多目标优化问题过程中的困难,本文提出了几种改进算法以提高求解高
学位
X射线检测技术作为一种常规无损检测方法已有近百年历史,随着计算机技术发展,以平板探测器为主流的数字射线技术已得到了广泛应用。然而在工业检测领域受透照条件、现场环境等因素影响,普通胶片仍然有着无法替代的地位。如何实现这些胶片数字化,便于计算机存贮和传输,实现缺陷智能识别,成为传统胶片使用过程中亟需解决的关键问题。本文以平板焊缝X射线检测胶片为对象,通过扫描仪实现图像数字化。通过研究图像处理和机器学习
学位
固体氧化物燃料电池(Solid Oxide Fuel Cell,SOFC)作为一种高温电化学装置,具有清洁高效、余热利用率高、燃料选择广泛等优点。然而,SOFC的大规模商业化受到成本、性能、耐久性的限制。为了解决这些问题,不仅仅需要对于各组分材料的性能进行优化,同时也需要对电极的微观结构进行优化,优异的电化学性能与SOFC材料在微纳米尺度上的结构紧密相关。因此,本文利用高分辨X射线CT技术获取了钇
学位