基于深度学习的多波段图像端到端融合方法研究

来源 :中北大学 | 被引量 : 0次 | 上传用户:nelly45
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对同一场景同时进行多波段探测成像是新一代高精度探测系统的主要技术特征之一,其目的在于综合利用不同波段探测的互补信息,以获得对场景更全面、更准确的解译。在现有图像融合研究中,模型驱动融合法需依赖大量先验知识,导致算法泛化能力差,不能自适应融合。相比之下,基于深度学习的融合法凭借其优异的特征提取能力和高精度学习能力成为了当下的研究热点。但目前深度学习融合法除同步融合数量少不能满足多波段探测系统的要求外,还存在因输入图像连续卷积而造成融合图像清晰度不高的问题。为此,本文在提出一种多波段图像端到端自适应融合模型构建方法的基础上,结合注意力机制和超分辨率技术,进一步改进了融合网络和融合结果,为多波段高精度探测系统自动化奠定了基础。具体工作如下:(1)提出了多波段图像端到端自适应融合方法。针对多波段图像融合中多尺度几何工具和融合规则设计困难的问题,构建生成对抗网络(Generative Adversarial Network,GAN),将多波段源图像同步输入设计的基于残差的生成网络,通过网络的自适应学习生成融合图像,将该融合图像和标签图像分别送入判别网络,通过判别器的特征表示和分类识别,逐渐优化生成器;在生成器和判别器的动态平衡中,得到最终融合图像,实现端到端自适应。(2)提出了多波段图像注意力机制自适应融合方法。针对多波段同步融合图像普遍存在的清晰度不高、图像细节不丰富的问题,设计混合注意力模型以构建特征增强模块,并连接特征融合模块,有效改善融合图像细节质量。(3)提出了多波段图像多对比度超分融合方法。针对红外源图像分辨率低导致多波段图像融合结果不理想的问题,构建多对比度超分辨率子网,利用成本低、分辨率高的可见光图像辅助提升红外图像,结合注意力增强融合网络,获得信息量多、清晰度高的高分辨率融合图像。
其他文献
在知识经济背景下,科学技术的发展日新月异,世界上越来越多国家将科技创新作为促进国民经济发展、提升国际综合竞争力的重要途径。因此,如何提升地区的科技创新能力便成为政界和学界关注的热点问题。而随着知识溢出效应中MAR外部性和Jacobs外部性的提出,为技术创新的影响因素研究提出了新的研究视角。直至今日,专业化和多样化何者为影响技术创新的关键因素仍是学者们热烈争鸣的重要议题。20世纪90年代以来,Gla
分数阶微分方程模型在很多科学领域都有广泛的应用,例如图像处理、神经网络、信号分析与处理等都可用微分方程模型来描述。因此,在学科研究中一个可解的分数阶微分方程模型能
随着三维扫描技术的发展,三维模型被广泛应用于影视、动画、医学等领域,由于手工绘制三维模型耗时又费力,而三维模型变形则通过利用现有模型来创建新的三维模型,快速实现模型重用,是三维模型编辑的研究热点,另外,在三维曲面之间找到一对一的映射关系的三维模型配准技术,也是三维模型研究的热点。本文针对直接在三维曲面之间变形局部区域失真较大以及配准艰难的问题,采用共形映射的方法,对他们分别进行研究,主要工作包括:
联会复合中心组分蛋白1(Synaptonemal complex central element protein1,SYCE1)该基因是组成联会复合体(Synaptonemal complex,SC)的主要成员,且对动物生殖发育具有非常重要的影响。雄性动物的生殖系统相对复杂,分泌激素、产生精子和成熟等功能主要由下丘脑-垂体-睾丸轴支撑,其次与各种参与的调节蛋白密切相关。本研究以雄性绵羊为研究对象,
软包锂电池因其性能优越,市场占有率正快速增长,但其外壳采用铝塑膜,质地很软,很容易受到损伤,严重的甚至会引发火灾,因此在其生产过程中对表面缺陷进行检测并筛选出不良品成
目前,火力发电仍是我国电力生产中的主力,随着电力企业对节能降耗问题的重视,如何通过对发电环节的优化控制,提高机组控制的精准性和能源利用率是电力企业亟待解决的问题。对
随着中国畜牧业的集约化、规模化发展,畜禽粪便的合理处理和资源化利用成为保证生态环境稳定、能源发展和保护食品安全重要的课题。厌氧发酵是广泛运用的畜禽粪便资源化利用
质子交换膜燃料电池(PEMFC)由于具有很多的优点,包括功率密度高、能量转换效率高、清洁无污染、可靠性高和噪音小等,因此被用来作为能量转换装置,并取得了高速发展。但是PEMF
传统单机仿真平台缺乏统一的资源管理,对单机系统要求较高,复杂仿真过程中生成的海量数据,如仿真中间数据,不能进行集中有效管理,而这些仿真数据对于产品研发是非常宝贵的参考资料。本文把云计算技术和仿真设计、仿真计算以及数据管理相结合,打通计算层、存储层以及调度层的数据接口,整合现有软硬件资源,提供统一的资源的调度和管理机制,实现设计经验的规范化保存和资源的统一管理。本文主要研究内容如下:1.云仿真平台架
在当今社会,随着奶牛对代谢性、感染性和炎性疾病易感性的增加,奶牛养殖业承受着巨大的压力。乳腺炎仍然是奶牛在泌乳期最常见的炎性疾病,导致乳汁产量减少、品质下降、治疗