一种基于生成对抗网络与注意力机制的可见光和红外图像融合方法

来源 :红外技术 | 被引量 : 0次 | 上传用户:kirawu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对低照度可见光图像中目标难以识别的问题,提出了一种新的基于生成对抗网络的可见光和红外图像的融合方法,该方法可直接用于RGB三通道的可见光图像和单通道红外图像的融合。在生成对抗网络中,生成器采用具有编码层和解码层的U-Net结构,判别器采用马尔科夫判别器,并引入注意力机制模块,使得融合图像可以更关注红外图像上的高强度信息。实验结果表明,该方法在维持可见光图像细节纹理信息的同时,引入红外图像的主要目标信息,生成视觉效果良好、目标辨识度高的融合图像,并在信息熵、结构相似性等多项客观指标上表现良好。
其他文献
热成像系统视场与空间分辨率(作用距离)的矛盾是常规成像模式难以解决的问题。多孔径热成像技术主要分为低重叠率、高重叠率和中度重叠率部分重叠成像模式。文中研究了一种视场部分重叠仿生热成像理论,利用4组红外物镜及IRFPA机芯构成了中心变分辨率4孔径分布式热成像系统,各子孔径的"并集"视场构成系统成像大视场,"交集"视场特别是中心重叠视场具有超分辨能力,从而构成空间变分辨率视觉模式,可减缓传统单孔径热成
理论上研究了吸收层材料的光学常数,该常数满足从紫外线到近红外波长范围的四层结构的光子-热转换的高效率。通过使用有效介质近似(EMA)模型,复合材料(金属陶瓷)的光学性能与模拟材料的光学性能非常吻合。此外,提出了使用Ti-MgF2金属陶瓷作为吸收层的具有高光子-热转换效率的四层膜结构,其在300~1600 nm的波长范围内具有约95.1%的高吸收率。研究结果为实现高效率的光热转换器件提供了新途径,显示了优良的应用前景。
提出了一种新的解决夜光遥感复杂背景问题的单阶段深度卷积检测网络,首先通过提取高维特征再特征选择的思想设计分类网络提取语义特征,并研究不同的通道数网络对降噪的影响;提出灰度能量的先验框匹配,将低噪声高质量的匹配框输入SSD检测网络,并使用积分图思想简化计算;使用可变形卷积以适应目标的形变,并获取更强的几何特征表达能力;通过加入顺序连接与密集连接改进全局语义模块,引入了网络的跨层信息交互,其注意力图综
数字全息显微技术(Digital Holographic Microscopy,DHM)将光学干涉和光学显微技术相结合,为微观物体的三维形貌、透明物体的厚度/折射率分布提供了一种快速、无损测量手段.
快速反射镜能否精确稳定跟踪目标取决于良好的伺服控制性能。快速反射镜的通光口径越大,柔性支撑铰链和驱动器设计难度就越大,同时也会对伺服控制提出更高的要求。针对此问题,本文提出模糊自适应整定PID(proportional integral derivative)控制算法,该算法既能运用模糊推理进行自适应整定控制参数,又能继承传统PID控制器便于工程实现。本文对音圈电机(voice coil motor)驱动的φ500 mm大口径快速反射镜进行控制器设计且进行仿真实验,并将其结果与基于传统PID控制下的相比较
时光如梭,回首2019年,《红外与激光工程》在广大专家、读者的支持和帮助下,不忘初心、稳步发展,取得了一些成绩,连续第六年被评为“中国国际影响力优秀学术期刊”,入选“天津
期刊
针对夜间红外图像中行人与背景灰度差异小且存在遮挡等问题,提出了一种夜间复杂场景下的红外行人检测算法。首先利用行人语义融合方法生成对目标全覆盖的显著图,与原图融合得到感兴趣区域,然后构造基于改进的方向梯度直方图特征的两分支分类器,同时提出一种遮挡判别算法,根据分类器模糊分数判断是否遮挡,设计一种头部模板实现最终的行人检测。在LSI远红外行人数据集和自主采集的冬、夏季节夜间行人数据上进行实验,结果表明
三维重建技术已在工业自动化领域得到了广泛的应用,但对于工业生产线中玻璃、锻造件等表面结构单一、高反光、无纹理的高温产品,利用传统的三维重建方法得到的三维重建结果往往不准确。这些高温物体会产生红外偏振自发辐射,提出了基于红外辐射偏振成像的目标三维重建方法。首先建立红外偏振辐射模型,分析目标表面红外辐射偏振态与目标表面法向量之间的关系,最后通过对法向量积分得到目标表面的三维形态。该方法不依赖于物体表面
锰基材料因其具有特殊的结构和性能而被广泛地应用在电化学储能及催化领域.以KMnO4和MnSO4·H2O为原料,聚乙二醇-4000(PEG-4000)为分散剂,通过水热法成功制备出了花瓣片状和
某透射式低温光学红外相机工作于倾斜地球同步轨道,所处空间热环境复杂多变,整个光学路径部组件属于低温光学系统,对温度梯度及温度稳定性要求较高,这对热控系统设计带来挑战