基于焦点区域检测的多聚焦图像融合方法的研究

来源 :山东建筑大学 | 被引量 : 0次 | 上传用户:nicoljoe001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于摄像机的景深有限,对于同一场景,很难获得一幅全聚焦的图像。这背后最重要的原因是,与镜头有特定距离的物体聚焦且清晰,而其他物体则可能模糊。为了扩展透镜的自由度并提高采集图像质量,以满足更多实际应用的要求,就需要一种低成本的图像处理技术,使每个物体都成为完全聚焦的图像。这可以通过集成具有不同聚焦平面的多个图像来实现,从而使得到的合成图像是一幅融合图像,其中所有物体都处于聚焦状态。这种图像处理的技术称为多聚焦图像融合(Multi-focus Image Fusion,MFIF)。作为图像融合领域的重要支系,MFIF一直是研究的热点。焦点区域检测是MFIF技术的关键要素。本文围绕基于焦点区域检测的MFIF展开研究。基于图像融合中最常用的三种途径,即空间域、变换域和深度学习,提出三种不同的MFIF方法,以有效解决目前MFIF过程中遇到的块效应、伪影以及失真和融合效率低等具有挑战性的问题。本文的主要研究工作描述如下。1.针对传统的基于固定块的融合方法在融合结果中容易产生块效应等问题,提出一种新的基于最优块的MFIF方法。与传统的基于块的方法不同,本文提出的方法不采用固定的块,而是采用四叉树分解的方式处理源图像。首先,为了检测出源图像的焦点信息,在修正拉普拉斯能量和(Sum of Modified Laplacian,SML)的基础上,提出了一种新的边缘加权SML作为焦点测度,命名为SEWML。这种改进的焦点测度相比于SML更具有稳健性。然后,提出一种有效的四叉树分解策略,将源图像分解成最优大小的块。同时,利用SEWML检测源图像四叉树结构中聚焦的块,自然地将聚焦块进行组合构成初始决策图,并对决策图进行优化,得到最终的决策图。最后,根据最终的决策图通过加权平均规则得到融合图像。在不同类型的多聚焦源图像对数据集上的实验结果表明,与其他14种最先进的方法相比,本文提出的方法获得了更好的融合性能。2.针对现有的MFIF方法对聚焦/散焦边界(Focus/Defocus Boundary,FDB)信息捕捉不准确的问题,提出了一种基于线性稀疏表示和图像抠图的MFIF方法。首先,引入一种基于线性稀疏表示的焦点测度,它利用自然图像形成的字典与输入图像在局部窗口上的线性关系,通过求解线性系数来表示图像的焦点信息。然后,利用这种焦点测度获取源图像的焦点图和一个由聚焦区域、散焦区域以及包含FDB的未知区域组成的三元图,并将三元图作为一个输入,采用图像抠图技术处理源图像的FDB区域,从而得到较精确的全聚焦图像。最后,为了进一步提高融合图像的质量,将得到的全聚焦图像作为新字典实现融合过程的迭代进行,在经过设定的更新次数后得到最终的全聚焦融合图像。图像融合实验采用典型的30对多聚焦源图像。实验结果表明,同其他最先进的融合方法相比较,本文所提出的方法具有较好的融合性能和视觉效果,且计算效率较高。3.针对现有基于深度学习的图像融合方法普遍采用分块作为输入的问题,提出了一种新的基于深度回归学习的MFIF方法。该方法是一种端到端的结构,并将焦点区域检测视为一个回归问题。具体来说,首先采用一种新的α-matte边界散焦模型,以精确模拟散焦扩散效应,并生成更加逼真的多聚焦图像训练数据。然后,一对多聚焦源图像被直接输入到网络中,以预测其关联的二值掩膜,其中每个元素表示输入像素是聚焦还是散焦。由于采用这种像素到像素的回归学习,使聚焦和散焦像素之间的区分信息以及每对像素之间的互补信息得到了有效利用,从而解决了其他基于分块的方法中所存在的边界不清晰问题。最后,根据估计的掩模,通过加权平均规则生成融合图像。本文方法通过引入边缘保持测度和焦点信息测度,进一步提高了融合图像的质量。大量的实验结果表明,与其他最先进的融合方法相比,本文提出的方法在视觉感知和定量分析方面都取得了较好的结果。
其他文献
在计算机技术和人工智能技术高速发展的背景下,智能化和信息化已经运用到了校园生活的每一个角落,人工智能技术的发展和电工电子教育的普及为电工电子实验室的教学和管理提出了更高的要求。传统的实验室多为人工管理方式,耗费大量的人力、物力,实验教学效率低,数据分散,资源浪费严重,而且不能对于实验室使用频率高的设备实现有效管理。除此之外,实验过程中产生的实验数据也难以得到及时的处理和科学的评判,同时指导教师人工
学位
目的 分析高血压患者全身麻醉恢复期开展前馈控制理论护理的作用。方法 选择本院收治的82例高血压患者为研究主体,研究启动于2020年5月,结束在2021年5月,全部患者均在全身麻醉下开展手术治疗。通过随机摸红蓝球方式将所有患者划分成常规组以及实验组,其中摸红球为常规组(41例),摸蓝球为实验组(41例),予以常规组患者麻醉恢复期常规护理,予以实验组患者麻醉恢复期常规护理以及前馈控制理论护理。对比每组
期刊
科技的进步推动了数字信息化时代的发展。伴随着数字成像与存储设备和互联网的迭代与普及,使得人们可以快捷地获取、存储和传播数字图像。因此,如何从各种日益增长的数字图像库中快速、准确地检索到目标图像,成为了计算机视觉和模式识别领域经久不衰的研究热点。围绕这一研究内容,本文以彩色纹理图像为研究对象,从特征有机融合和深度学习两个方向出发进行相关的图像检索研究。其中,特征融合的目的是结合不同类型的底层特征得到
学位
世界卫生组织在关于影响人类健康因素的相关报告中指出,环境因素占17%、生物学因素占15%,而医疗服务因素仅占8%。其中空气质量在环境因素中起到决定作用,尤其是室内可挥发性有机化合物(Volatile Organic Compounds,VOCs)直接影响人类的健康。因此,室内VOCs的检测研究具有非常重要的现实意义。本课题通过研制一种新型室内VOCs检测仪器,实现室内VOCs混合气体各组分浓度的在
学位
电子背散射衍射(Electron Backscattered Diffraction,简称EBSD)作为扫描电子显微镜的一种常规附件,同时兼备了X射线分析和透射电子显微镜中电子衍射的特点,在材料科学和地球科学等领域得到了广泛的应用,如今,EBSD技术已成为材料微观表征不可或缺的重要手段。通常来说,材料的表征区域由10~7至10~8个扫描阵点组成,每个扫描阵点采集一张EBSD花样,利用Hough变换
学位
随着生产生活的发展,铁路列车进一步提速势在必行,行驶速度的提升对列车制动性能提出了更高的要求。传统制动系统因磨损、热疲劳等失效行为导致其使用寿命比较短,难以满足现有的高速列车的运行需求。目前制动系统相关研究主要集中在通过制动盘的表面强化,使制动盘的性能得到提升,以延长其使用寿命。本文利用激光熔覆技术在因瓦合金表面制备复合涂层,研究线能量、不同B、Ti比的增强颗粒的添加对复合涂层组织与性能的影响。利
学位
随着集成化、小型化高性能设备的广泛使用,不可避免地带来了一系列机械振动问题,同时伴随而来的还有噪声污染,对人类的生命健康和生存环境产生了巨大的威胁。为了延长设备的使用寿命并营造良好的生存环境,需要利用性能优异的阻尼材料将振动产生的部分能量转化为热能耗散掉。由于硅橡胶主链Si-O键能(451 k J/mol)较大,分子链柔顺,耐高低温,在较宽的温度范围内(-50~200℃)拥有稳定且可靠的力学性能,
学位
伴随着互联网技术的迭代发展,近年来高校学生党建工作的开展也逐渐产生一些新的特点,“互联网+”党建的工作模式越发受到关注。网络思想政治教育工作经历多年的探索和完善,在长期发展过程中积蓄了革新动力,新时代大学生对于各类新兴互联网技术的热衷更为互联网视域下党建工作和思政工作的融合发展提供了有利环境。文章通过探索二者的深度融合,形成育人合力,能够有效推动新时代高校学生党建工作和思政工作的传承与创新。
期刊
随着智能配电网技术的快速发展和用户用电需求的日益提高,用户的用电质量和用电稳定性需得到进一步的提升。配电网状态估计作为配电管理系统的重要组成部分,是配电系统高级应用和安全稳定运行的基础。因此,如何提高状态估计的精确度成为配电网状态估计的研究重点。本文以计及负荷模型的配电网状态估计为主要研究内容,从配电网状态估计的基本算法、配电网综合负荷模型、光伏发电并网系统模型和包含光伏发电的负荷模型等方面开展研
学位
为减少非法穿越行为对自然保护地自然资源、政府社会管理造成的破坏和影响,以陕西太白山国家自然保护区“鳌太线”为例,分析了非法穿越在破坏自然资源、污染生态环境、造成人员伤亡、浪费社会资源等方面带来的危害,以及包括民众认识不足、穿越行为和社会舆情管控难度大、执法困难多、存在法律法规空白等造成非法穿越难以管理和杜绝的原因,提出了开展广泛宣传、大力营造良好的整治氛围,加强警示教育、筑牢拒绝非法穿越思想防线,
期刊