基于卷积神经网络的高光谱图像超分辨率研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:xiegenda
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高光谱图像(Hyperspectral Image,HSI)因其包含了丰富的光谱信息在遥感和计算机视觉等领域被广泛应用。受硬件条件的限制,高光谱成像系统往往很难同时达到高空间分辨率和高谱间分辨率。因此,高光谱图像超分辨率作为一种提升空间分辨率的后处理方法具有现实意义。本文的研究集中于基于卷积神经网络的高光谱图像超分辨率方法,并从数据和模型先验两个角度提出了两个改进算法。本文研究工作主要包括以下两个方面:(1)我们首先分析了现有的两类高光谱图像超分辨率算法:基于融合的方法和基于单图的方法。前者可以同时利用低分辨率高光谱图像(LR-HSI)和高分辨率多光谱图像(HR-MSI)两个信息源,但是需要精确配准的高光谱-多光谱图像对作为输入,限制了其应用场景。而后者仅仅需要高光谱图像输入,然而缺乏高分辨率输入限制了其性能,也无法利用现有的成对数据。结合上述两类方法的优点,本文提出了一种基于知识蒸馏的新框架,该框架将HR-MSI作为特权信息(privilege information),在训练阶段使用知识蒸馏将高分辨率多光谱图像的知识从辅助模型传输到单图高光谱图像超分辨率模型(主模型),而在测试阶段仅仅使用低分辨率高光谱图像作为输入。光谱超分辨率模型被用作辅助模型;为了解决3D CNN主模型和2D CNN辅助模型之间的异构蒸馏问题,我们设计了一种双分支的3D/2D混合结构,称为面向蒸馏的双分支单图高光谱超分辨率网络(DODN)。DODN添加了一个额外的2D分支用于知识蒸馏,将3D模型与2D模型之间的异构蒸馏问题转化为模型内的特征融合问题。实验表明,DODN在主观和客观效果上都超过了现有的单图高光谱图像超分辨率方法;消融分析也证明了知识蒸馏的有效性。(2)我们在上述研究内容的基础上进一步研究单图高光谱图像超分辨率的模型先验。由于高光谱图像的多谱带性质,3D卷积被广泛用于提取空-谱信息;然而,基于全3D CNN的模型往往被认为复杂度过高,无法在有限的高光谱图像数据集上发挥作用。结合U-Net结构,本文设计了一种简单而有效的全3D模型F3DUN,实验表明F3DUN在公开数据集上超过了现有的单图高光谱图像超分辨率方法,证明了全3D模型的有效性。此外,通过对具有相同结构的3D/2D混合模型和全3D模型的分析,发现全3D模型在一定条件下优于3D/2D混合模型,且对于训练样本的规模比常识所认为的更加鲁棒。总的来说,本文从数据和模型先验两个角度对目前基于卷积神经网络的高光谱图像超分辨率方法进行了改进。在数据方面,使用知识蒸馏让单图高光谱图像超分辨率模型可以利用来自HR-MSI的信息,提升了效果。在模型先验方面,通过实验说明了全3D模型在高光谱图像超分辨率领域的有效性,并探索了全3D模型与训练数据的关系。
其他文献
葡北油田四~七断块位于葡萄花构造西北部,研究区断裂发育,构造较为复杂;储层发育窄、薄,砂体在平面上变化大。应用现有钻井、测井单一井点的资料很难实现对于井间砂体情况的精细研究,满足当前勘探开发中后期的需求,针对此问题,通过开展精细构造解释与储层预测研究,达到精准认识储层目的。基于高分辨率层序地层学原理、构造地质学原理,进行葡Ⅰ油组内部的地层划分,结合相干数据体浏览、地震属性特征、三维可视化等技术实现
学位
共识机制作是区块链的核心技术之一,能够在去中心化的系统中,实现账本的分布式一致性,良好的共识算法可以提高区块链的性能,也可以维护区块链系统的稳定运行。本论文主要是对区块链的核心技术——共识算法进行深入了解,在联盟链中难以避免会有恶意节点的存在,在节点达成共识的过程中,恶意节点可以会散布不实信息,影响数据的一致性。使用实用拜占庭共识算法(Practical Byzantine Fault Toler
学位
空化现象会对水力机械过流部件表面造成空蚀破坏,从而导致水力机械和工程设施运行效率下降、寿命缩短等问题。近壁面空化泡动力学的研究对于工程应用有着重要的意义,目前相关研究大多将问题简化为平直边界附近空化泡动力学特性,忽略了壁面的表面形貌对空化泡动力学的影响,而当边界表面存在裂纹和凹坑时,凹陷结构会导致空化泡动力学特性发生显著变化,因此本课题从微观角度出发,研究了凹陷边界对空化泡动力学行为的作用机制,为
学位
燃气轮机在各个工业领域都具有十分重要的作用,由于燃气轮机燃烧室长期工作在高温高压、振动、化学反应的复杂环境中,燃烧室很容易出现喷嘴积碳、火焰筒烧蚀等故障。目前对燃气轮机运行状态监测系统对燃机故障的发生预测依然存在很多事后维修、事后报警的现象,这将导致燃气轮机异常停机,造成经济损失。对燃气轮机故障进行有效预测可以节省燃机运行时的检修费用、减少停机时间并避免燃机发生大规模故障。为建立有效的燃气轮机监测
学位
在霍尔推力器工作过程中的放电电流低频振荡会导致推力器性能降低并影响电源的稳定工作。为了降低低频振荡的影响,最常用的方法就是在推力器和电源之间加入一个匹配回路。但是,传统的LC匹配回路在应用于大功率霍尔推力器时存在直流功耗大、重量大的问题,开发和设计适用于大功率霍尔推力器的匹配回路具有重要的应用价值。首先,本文针对传统的LC匹配回路不适用于大功率霍尔推力器的问题,设计了一种新型的耦合电感匹配回路,发
学位
随着铁路技术的发展,列车的车速和载重都在不断提高,列车运行的安全问题也受到了越来越多人的关心。车轮作为列车的关键部位之一,它的完整程度直接决定了列车能否安全地行驶,车轮上严重的伤损可能会导致列车在运行中脱轨,威胁列车上乘客的生命安全。因此进行车轮伤损检测方法的研究在保证列车的安全运行中具有十分重要的意义。本文使用声发射技术作为车轮伤损检测方式,针对其容易受到噪声干扰的问题,以特征提取与分析和深度学
学位
神经网络如今在各种机器学习任务中都取得了显著的成功,而神经网络推理,也在生活中得到了广泛的应用。在推理的过程中,用户往往需要提供自己的隐私信息,例如人脸图片,输入记录等,存在数据被收集后滥用的风险。安全多方计算能很好地解决上述问题,从理论上保证数据的安全性。但性能一直是安全多方计算的主要问题,将使推理过程产生极大的延迟,极大地影响用户体验,例如输入预测,长达几秒钟的推理时延是用户根本不能接受的。在
学位
A87区块位于松辽盆地中央坳陷地区,油气资源充足。该区块萨尔图油层和葡萄花油层油水关系和流体性质复杂,存在油层、气层、油水同层和水层以及低电阻率油层和高电阻率水层现象,油水层识别难度大。因此,有必要开展A87区块萨葡油层含泥含钙储层测井评价方法研究。本文利用岩心分析、录井、测井和试油资料,研究了A87区块萨葡油层储层特征和四性关系,得出萨尔图油层储层主要岩性为粉砂岩、钙质粉砂岩、泥质粉砂岩,含泥含
学位
空间引力波探测项目为保证测量平台超静稳工作,对微牛级推进系统提出了“宽、稳、准、快、久”等非常严苛的性能指标。而作为电推进系统中两个主要的执行模块:推力器与阴极,两者的工作状态彼此影响、紧密交织,在微牛级系统中耦合效应更是显著,为保证推力输出符合项目指标,迫切需要探究两者的耦合特性。会切场推力器具有宽范围可调、工作稳定、寿命长等特点作为引项目的备选推力器之一,为增强低流量下工质电离引入微波放电增强
学位
运用直观模型指的是用“画图、列表”等可视化手段“表示”出思考过程、数学知识内涵或问题解决过程的一种方式,是小学生学习数学的重要手段。在计算教学中,教师要正确认识与辩证使用直观模型:通过“计数”直观材料获得正确的计算结果是算法多样化的根本保证;用矩形的面积表示分数乘法有两类不同含义,其一是基于分数意义的直观模型,其二是将分数乘法定义为矩形的面积;直观模型只是数学学习的表征方式之一,随着学生年龄增长应
期刊