基于源图像分解和细节优化的红外与可见光图像融合算法研究

来源 :江西财经大学 | 被引量 : 0次 | 上传用户:ChampionHan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单一的传感器只能获得单模态的场景信息,存在一定的局限性,而随着技术的不断发展,传感器的种类越来越多,人们可以获得同一场景多个传感器拍摄的图像。图像融合技术对多传感器拍摄的同一场景图像进行多方位、多角度融合,以减少冗余信息并获得良好的视觉效果和丰富的细节。可见光图像包含了场景的背景信息以及纹理信息,但在某些特定情况下,如在弱光、雾等环境条件下,目标很难在可见光图像中观测到。红外图像则反映了目标与背景之间的强度差异,可以轻而易举地捕捉目标信息。然而,红外传感器得到的图像缺乏细节信息。红外与可见光图像融合技术是将红外与可见光图像中的互补信息相结合的重要技术,目前已广泛应用于目标识别、遥感、军事侦察等领域。在红外与可见光融合领域,常用的传统方法主要包含基于多尺度分解的方法和基于稀疏表示的方法。基于稀疏表示的方法非常耗时,而在基于多尺度分解的方法中,如何选择灵活的基函数来分解源图像仍然是一个挑战,且多数方法得到的融合图像中存在噪声,表现为人眼视觉感知不佳。基于深度学习的融合方法计算效率相对较高,但训练过程较复杂且不稳定,容易丢失红外目标的亮度和可见光图像的细节信息。本文针对上述问题进行研究,提出了新的解决方案。论文的主要创新工作如下:1)针对基于多尺度变换分解的方法中所存在的问题,提出了一种基于双核侧窗滤波和S型曲线变换的红外与可见光图像融合方法。首先,设计一个具有自适应滤波核大小的双核侧窗盒滤波器(DSWBF)来提取源图像的基础层和细节层。然后,对基础层提出基于显著性的融合规则,突出红外图像的显著区域。接着,采用S型曲线变换和引导滤波构造细节优化模块,对红外图像的细节层进行优化。随后,对细节层进行融合,得到融合后的细节层。最后,对得到的基础层和细节层进行重建,得到最终的融合结果。在两个公开数据集上的实验结果表明,与现有的融合方法相比,该方法在主客观评价上都能获得更好的融合性能。2)针对传统的基于多尺度分解的方法中存在噪声的问题和基于深度学习的方法容易丢失目标亮度或细节信息的问题,提出了一种将传统的多尺度分解与深度学习相结合的红外与可见光图像融合方法。具体来说,首先,使用滚动导向滤波器和高斯滤波器结合,对源图像进行分解,得到基础层和细节层。然后,在基础层方面,采用Nest Fuse网络将红外图像基础层的目标信息和可见光图像基础层的背景信息进行有效融合,得到融合后的基础层图像。接着,在细节层方面,利用侧窗盒滤波器,对红外图像的细节层优化,减少红外细节层中的噪声信息,再将其与可见光图像的细节层进行融合,得到融合后的细节层图像。最终,利用融合后的基础层和细节层图像进行图像重构,得到融合图像。实验结果表明,该方法不仅削弱了噪声对融合图像的影响,而且无论是主观还是客观方面,都比仅仅使用Nest Fuse网络的结果更佳。
其他文献
自从中本聪提出比特币和区块链概念以来,区块链技术得到了广泛关注和发展。区块链具有的防篡改、可追溯和完全去中心化等优点使其具有广阔应用场景,目前已广泛应用于多个领域,如金融、医疗、供应链、政府监管、资产管理等。但是,从事务处理角度看,区块链系统事务处理低下严重阻碍了区块链技术广泛应用。相比于传统数据库系统,区块链系统事务执行缺少并发控制,节点间存在大量事务冗余执行,系统框架上缺乏事务并行执行的设计。
学位
信息化技术的发展给远程医疗和医疗图像共享带来极大的便利,然而,医疗图像作为一种特殊且私密性较强的数字化影像,在公共网络上传输时难免被截获或篡改。患者医疗图像一旦泄露或者遭到恶意的利用和操纵,很容易导致一系列社会性问题。因此,在医疗健康领域,加强医疗图像的安全共享是必不可少的一项工作。区块链技术作为一种新兴的分布式账本,因其去中心化、去信任、不可篡改和可以溯源等特征,已被应用于医疗图像的内容保护与安
学位
随着人工智能的发展,场景几何信息的获取,例如深度图像,对高级计算机视觉任务有重要的作用,其被广泛应用于虚拟现实、无人驾驶等领域。目前主流的深度图像获取方法有两种,一种是通过立体匹配算法生成深度图像,这种方法对低纹理和遮挡区域的匹配效果不佳,另一种是通过To F传感器等设备主动感知深度值,这种方法受限于设备成本,获得的深度图像分辨率低且带有噪声。因此,为满足热门视觉任务需求,深度图像增强需求极为迫切
学位
心律失常所导致的高致死率和高致残率并发症给家庭和社会带来了沉重的负担。如何有效预防和诊断心律失常已成为当前亟待解决的问题。现有的诸多方法中,对人体心电图(Electrocardiogram,ECG)进行实时动态自动监测是一种最为有效预防和诊断心律失常的手段。在进行ECG信号自动监测时,心律失常识别准确度是最为重要的问题之一,而ECG信号特征提取是提高其识别准确度的关键步骤。然而,现有的ECG信号特
学位
随着数字媒体的发展和信息传播方式的多元化,图像逐渐成为了人们接收信息的重要媒介之一。人们在生活工作中会接触大量的图像数据,但往往只关心其中的少量信息。因此,从图像中高效快速地提取吸引人类注意力的信息是极其重要且有意义的。显著目标检测(Salient Object Detection,SOD)研究旨在从图像中快速定位和提取最吸引人类注意力的目标和区域,以帮助人们快速获取有用信息,是计算机视觉中一个重
学位
随着互联网技术的发展和普及,经济一体化浪潮的到来,电商产业获得了快速发展。同时随着网上购物逐渐进入了人们的生活中,与之密切相关的物流业务也获得了高速发展的机遇。虽然快速便捷的快递运输提高了人们的生活效率,但也带来了一些隐患,其中用户隐私泄露问题最为引人注目。目前快递运输是通过包含用户明文信息的快递单来实现的,由于贴在包裹上的快递单暴露在外,使得不法分子很容易直接或间接地得到用户信息,从而造成用户隐
学位
图像描述任务旨在生成给定图像的语言描述。该任务非常具有挑战性,因为它需要深入了解视觉和文本信息之间的关系。近年来,随着计算机视觉和自然语言处理技术的发展,图像描述任务取得了新的进展。当前,软注意力机制被广泛应用到图像描述任务中,它不仅提升了图像描述的性能,还为模型的定性分析提供视觉解释。软注意力机制根据上一时刻的单词,生成不同的权重并对图像特征进行加权融合,得到视觉注意力特征,并以此生成当前时刻的
学位
随着计算机技术和互联网技术的发展,多媒体信息的网络传输成为信息交换的主流方式,图像信息安全的关注度已经超越文本信息安全,成为信息安全领域研究的热点课题。文本信息安全已经形成了标准的密码算法,如国标SM4和美标AES等。但是,与文本信息相比,一幅图像往往具有巨大的数据量和极高的冗余度,这使得标准的文本加密算法不能直接应用于加密数字图像。近年来,由于混沌理论和DNA计算的发展,图像加密技术的研究取得了
学位
红外与可见光图像融合是将由不同传感器获得的来自同一场景的两张图像结合起来,生成一张包含两张源图像互补信息的图像。可见光传感器通过捕获反射光获得包含丰富背景信息的可见光图像,但是却很容易受到环境因素的影响。红外传感器能够克服这些因素的影响,它通过捕获来自目标的热辐射获得具有清晰轮廓但背景模糊的红外图像。因此,将红外图像中的热辐射目标信息与可见光图像的背景信息融合到一张图像,不仅更利于人眼的视觉感知,
学位
近年来,虽然我国对于证券市场的监管制度愈发完善,但是上市公司的财务欺诈行为并没有随着制度的完善而消失,各种财务欺诈案层出不穷。该行为不仅会造成报表使用者的利益损失,还会冲击整个市场的资本环境。在面对财务欺诈这一棘手的问题时,如何构建出准确高效的财务欺诈识别模型,成为了财务报表使用者以及市场监管者最关心的问题之一。现有研究表明,基于财务指标和财务文本能有效地识别出存在财务欺诈行为的样本。本文以上市公
学位