基于深度学习的多光谱图像近实时重构方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:robinchen
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算成像技术[1]通过获取目标的二维空间信息以及逐个像素点的一维光谱信息,最终组成的图谱结合的数据立方体。随着压缩感知(Compressive Sensing,CS)理论在各个领域应用和实践的展开,光谱成像技术也开始将CS重建方法应用于其中,如贪婪迭代法[2]或者凸优化法[3]等,通过求解优化问题来恢复多光谱图像。然而,传统的CS重建方法通常在空间分辨率和迭代时间之间进行折衷,难以实现高质量的快速多光谱图像重建。因此如何能够快速且高质量的实现多光谱图像重构成为了光谱成像技术中一个亟待解决的问题。本文重点研究了基于深度学习的多光谱编码图像近实时重构关键技术,主要完成工作如下。(1)针对传统的测量矩阵的稀疏性与多光谱图像场景不适配,导致测量矩阵无法利用多光谱图像的细节信息实现高质量的图像重建问题,研究并实现了一种基于编解码神经网络的编码模板设计方法。首先,设计BinaryNet结构作为编码网络,使用二进制权重的方法来训练编码网络;其次,采用多层感知器(Multi-Layer Perceptron,MLP)网络模型作为解码网络,来学习非线性映射数,准确的重构多光谱图像;最后,采用多光谱图像数据联合训练编解码网络,训练出应用于多光谱图像重构的编码模板,通过多组仿真实验与其他测量矩阵对比,在采用相同的多光谱图像重建算法的基础上,分析其图像评价指标,本文提出的编码模板比传统的随机测量矩阵具有更高的重建性能。(2)针对传统基于压缩感知的多光谱图像重建算法采用迭代的方式来提高重建图像质量,导致算法运行时间长的问题,深入研究了基于深度学习的多光谱图像重构方法,设计并实现了基于残差卷积自编码器的多光谱图像重构方法。首先,通过卷积自编码器中的编码器,实现对多光谱数据的编码,然后,利用解码器的解码能力重建出多光谱图像,并且在解码器中采用深度残差结构,进一步提高解码器的解码能力。通过对比多组实验,分析其各组实验结果的图像评价指标,可以看出本文的基于残差网络的卷积自编码器多光谱图像重构方法在速度方面优于其他对比方法,且在图像质量方面还有所提升,重建出的多光谱图像细节信息更加丰富,光谱关联性强。(3)针对快照压缩光谱成像模型中重构算法没有利用多光谱图像数据之间的光谱关联性导致重建数据光谱关联性不强、空间分辨率不高和重建算法运行时间长的问题,设计并实现了基于U-net与SA-cGAN相结合的快速多光谱图像重构方法。首先,将条件生成对抗网络作为基础,利用图像恢复能力以实现图像重建;然后,将自注意力机制(Self Attention,SA)引入GAN框架中,将所有的光谱通道共享相同的注意图,保持多光谱图像重建中的光谱相似性;最后,用U-net代替传统的全连接层,简化网络结构,提高网络的时间效率。通过进行多组仿真实验与其他方法结果进行对比,分析其图像评价指标,实验结果表明本文所提出的基于U-net与SA-cGAN相结合的快速多光谱图像重构方法,具有更高的图像质量和光谱关联性,且重构速度较快。
其他文献
当前学术界多利用最新的MOCVD技术研发制造半导体装置,所谓的MOCVD即金属有机化合物气相沉积,由于红波的特殊波长使其可以穿过该材料,所以进行该材料的生产时,多用红外线式温度测量仪对外延片得温度进行测量,由于外研生长量子受温度的影响变化明显,所以本次研究活动全面、细致的论述了实现外延在线式表层温控的具体办法和相关测量设备的设计方式,具体研究过程如下所示:(1)对比多种温度测量办法后,考虑到该材料
人工智能(Artificial Intelligence,简称AI)自概念提出以来已经过60多年的发展并在各行各业取得极大成功。我们生活在一个数字时代,社会中的每个人所面对的都是数字化的未来。教育作为进步和改变的引导者,更应该结合现代社会的需要,运用现代科技开展新模式的教育教学。在这样的环境之下,“AI+教育”系统应运而生。“AI+教育”系统即AI应用于教育领域之中,是一种结合了AI和教育的新范式
在传统的手术室或监护病房中,医疗设备种类繁多,通讯协议各不相同,数据格式也多种多样。现有的医疗设备数据解析技术只支持单一类型的医疗通讯协议,并且只适用于单一种类的医疗设备,既不支持对设备进行管理和配置,也不支持对数据进行存储和备份。医院中现有的中央监护系统也只是对同厂商的监护仪画面进行转接,并不对设备数据进行解析处理。因此,研究如何屏蔽底层设备的差异性以对多种医疗设备进行统一管理,如何屏蔽医疗通讯
装配序列规划是产品装配工艺规划的重要部分,通过在给定的约束条件下对装配零部件的装配先后顺序进行排序,从而获得生产成本更低、装配效率更高且产品质量更优的装配方案。因此,进行装配序列规划对装配工作具有十分重要的指导作用。由于装配序列规划问题是一个典型的组合优化问题,结合现有的研究成果,本文提出利用智能水滴算法来求解该问题。从装配序列的建模、评价体系的构建、最优装配序列的获取这三个方面来实现。主要研究内
在万物互联的背景下,边缘计算作为云计算的延伸与扩展为海量终端设备提供服务。云计算将能力下沉到边缘侧,在靠近终端的网络节点上部署边缘节点设备处理终端产生的数据,解决了网络带宽负载过重的问题,并提供更好的实时服务。边缘计算的出现也改变了传统云计算的“云到端”二级网络架构,演进为“云-边-端”三级网络架构。新型网络架构存在边缘节点设备层级多,终端设备接入量大且具有异构性和移动性等情况,导致传统云计算的安
硅钢片是目前电工、电子行业中应用最为广泛的一种铁芯材料。因受材料本征属性限制,硅钢片等铁芯材料在工作过程中会不可避免的产生能量损失。目前通用的硅钢片含Si量一般都在3.5%(质量百分比,下同)以下,当硅钢基体中的含Si量达到6.5%Si时,合金的交流铁损值最低、矫顽力最小、磁滞伸缩几乎为零,所以6.5%Si高硅钢被认为是最为理想的铁芯材料。但是由于硅钢中的含Si量超过4%时,合金的硬度与脆性急剧增
雷达数字化样机平台是为构建雷达和电子对抗的数字化装备,提高设计效率,缩短研制周期,保证可靠性和可维护性而研发的软件平台。数字样机平台的研发是集分析、设计、仿真实验和系统管理于一体的大型系统工程。通信中间件作为雷达数字化样机中计算集群不可或缺的一部分,旨在于整合分布式计算节点,提供统一的通信接口封装,以简化分布式应用程序的开发复杂度,便于计算集群的弹性扩展和维护,使分布式计算集群更有效率的为数字化样
高速切削与常规切削相比,具有加工效率高,切削表面质量好和加工成本低的优势,己被广泛应用于航空军事、模具制造和航海业等。切削过程中的非线性过程使得切削过程的研究存在很多问题,但随着计算机仿真技术的发展,有限元仿真技术在高速切削领域得以应用,目前有限元仿真技术已经成为研究高速切削的一种重要的方法。本文使用有限元分析软件AdvantEdge FEM对镍白铜B10的高速直角切削过程进行仿真,研究切削力和切
由于现代制造业中标准化进程的加快,对产品的质量有了更加严格的要求。具体到机加工领域,深孔镗削过程中产生的振动使工件质量降低,同时严重影响切削效率。本文考虑摩擦减振镗杆系统中的摩擦因素建立了基于摩擦耗能的多自由度减振镗杆系统动力学模型,数值模拟了系统参数对系统振动特性的影响,通过最大Lyapunov指数分析了系统振动稳定性。根据摩擦减振镗刀杆的工作原理,基于Stribeck静摩擦模型和LuGre动摩
液压传动是以液体为工作介质进行能量传递的一种传动形式。液压缸作为液压传动系统的主要执行元件,对输出的各项性能指标起到至关重要作用。液压缸在运动时往往具有很大的动量,行程至末端时会产生强烈的冲击,若无合理的缓冲装置,将产生较大振动和噪声,缩短使用寿命,情况严重时会损坏液压缸及相关设备。因此,液压缸的行程缓冲性能对其工作性能极为重要。随着磁性材料的不断发展,永磁体的磁场性能也在不断提高,磁性材料在各领