基于图像分割与深度学习的高光谱图像分类方法

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:lawrenceccc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高光谱图像相比于自然图像具有更加丰富的空间信息和光谱信息,能够用于对地物目标进行更准确的识别,近年来得到了越来越广泛的研究和应用。高光谱图像数据丰富,但是标记样本难以获取,因而应用更少的标记样本得到更高的分类精度是重要的研究方向。随着深度学习技术的发展,许多基于神经网络的高光谱图像分类方法取得了很好的分类效果。但是这些分类方法大多从邻域块内提取特征信息,忽视了地物目标在空间上更大区域内的匀质性。图像分割可以将图像中的像素划分为具有一定语义的超像素,超像素可以表明地物目标在更大范围的空间分布情况。如果将图像分割的信息用于高光谱图像分类,将有利于分类效果的提升。本文将图像分割与深度学习结合起来进行高光谱图像分类,探索了使用深度神经网络对图像分割的信息进行有效利用的方法,取得了良好的分类效果。本文主要完成了以下工作:(1)针对现有方法仅利用样本邻域内信息,对地物目标的区域匀质性利用不足的问题,提出了一种基于超像素分割和辅助样本的高光谱图像分类方法。该方法利用高光谱图像第一主成分图的超像素分割信息,筛选与待分类样本具有较高空间相关性的样本,并进一步筛选得到与待分类样本光谱相似性较高的样本,将这些样本作为待分类样本的辅助样本,利用双分支卷积神经网络进行特征提取和分类。辅助样本与待分类样本具有较大程度上共性的特征,我们通过模型的辅助分支提取这种共性特征,同时通过主分支保留待分类样本本身丰富的共性特征和差异性特征作为分类过程的主要特征。该方法在多个常用的高光谱图像数据集上取得了很好的分类效果。(2)针对现有方法对不同波段中的空间差异性以及地物目标的区域匀质性利用不足的问题,提出了一种基于多波段熵率超像素分割和双分支神经网络的高光谱图像分类方法。考虑到高光谱图像不同波段所包含的空间信息是不同的,而现有方法并没有充分利用这种光谱波段上的空间差异性,同时现有方法基于邻域块进行特征提取仅能得到邻域尺度的空谱信息,无法挖掘邻域块之外的特征信息,因此该方法对每个波段的图像进行超像素分割,分割结果中包含了超像素尺度的空谱信息,将得到的超像素分割结果堆叠后进行预处理,作为双分支神经网络一条分支的输入,将预处理后的高光谱图像作为另一条分支的输入。两条分支分别进行特征提取,随后进行特征融合与分类。该方法充分挖掘了高光谱图像在超像素尺度和邻域尺度的空谱联合信息,进一步提升了模型的分类效果。(3)针对现有方法没有充分利用无标签样本的问题,提出了一种基于超像素分割和半监督学习的高光谱图像分类方法。该方法利用半监督学习的思想,不仅从有标签样本中学习特征,而且从无标签样本中学习特征。该方法首先对高光谱图像进行多波段、多尺度分割,利用分割结果生成边权图,边权图中的边的权值记录了所连接的两个样本的相似性。利用孪生网络对所有样本进行相似性学习,将学习到的模型的特征提取部分的参数用于分类模型的参数初始化。此外,我们设计了模型选择标签方法,将无标签样本加入训练过程。该方法利用了高光谱图像中的无标签样本来学习关于数据分布的先验知识,充分挖掘并结合了有标签样本和无标签样本中包含的信息,有效提高了模型的分类精度。本文对上述三种方法的设计思路和算法流程进行了详细介绍,并在多个具有代表性的高光谱图像数据集上进行了实验验证。此外,通过与所提方法的不同变体进行对比,本文进一步对所提方法的细节进行了分析,总结了所提出的方法可以进行有效分类的原理。
其他文献
在互联网飞速发展的背景下,网络中的知识信息迎来了爆炸式的增长,大量的领域知识分散地隐藏在网络数据中。面对海量的领域知识,想要第一时间从中获得需要的关键信息变得非常困难。由于缺少统一的知识集成管理和可视化分析方式,导致知识的共享率不高,而且无法进行有效的分析和复用。此外,在数据多样化的发展趋势下,人们对于知识的多维度表示需求日益增加,这对知识的共享管理和可视化分析提出了更高的要求。目前已有一些知识平
学位
行人检测作为智能安防系统、自动驾驶系统、智能机器人等应用领域的关键技术,有重要的研究价值和意义。目前基于深度学习的行人检测已初步取得成效,但针对大视场高分辨监控视频中的行人检测研究较少,由于其中行人数量多、尺度差异大,已有的行人检测模型难以实现准确的检测定位。本文开展了基于深度学习的大视场高分辨监控视频行人检测研究,结合图像的特点,在图像预处理,提取特征,图像后处理三部分进行了改进,提升了行人检测
学位
人脸吸引力评估研究作为计算机视觉领域中具有挑战性的课题,受到了许多学者的广泛关注,同时也取得了一系列研究成果。但是先前的人脸吸引力评估方法主要学习的是从人脸美学特征点到吸引力得分之间的简单映射,这些方法忽略了人脸吸引力评估中存在的主观性,即不同的人对人脸美学的认知或评判标准是存在偏差的。另外,现有的公开人脸吸引力数据集规模较小,使得模型容易过拟合且泛化能力较差。针对以上问题,本文提出基于相对排名的
学位
目标跟踪问题是计算机视觉领域的热点研究课题,其通过视频序列第一帧目标的位置尺度信息,预测出后续帧目标的位置和尺度。目标跟踪技术广泛应用于安防监控、智能交通和体育赛事转播等领域。现阶段的目标跟踪面临许多挑战,比如运动模糊、低光照、目标被遮挡、背景干扰等因素,影响了跟踪器的性能。近年来借助深度学习的蓬勃发展,科研学者提出了基于深度学习的目标跟踪框架来解决可见光(RGB)目标跟踪问题,这些目标跟踪算法利
学位
当前,工程实践领域中的许多问题都可以转化为多模态优化问题,即要求同时找到问题的多个或全部最优解,以供决策者进行选择。进化算法因其具有全局选择和随机搜索的特点,常用于解决优化问题。然而,传统的进化算法的目的是找到问题的一个解,在处理多模态优化问题时,难以稳定地同时收敛到多个最优解。为了提高进化算法处理多模态优化问题的能力,需要保留种群的多样性,小生境技术的加入能够很好地实现这个效果。差分进化算法是进
学位
随着移动互联网技术的迅速普及,个人以及服务器上的图像资源已经越来越丰富,这个巨大的图像数据库中蕴藏着大量有价值的信息。视觉模式挖掘技术致力于对海量图像数据自适应分析并处理,以此获取有意义的规律并加以利用,该任务也是近年来多媒体数据挖掘领域的热点研究方向之一。视觉模式是指通常出现在图像中的基本元素,并且往往比原始像素传达更高级别的语义信息。它们可以捕捉视觉对象或者场景的本质内容,并代表了对象在视觉世
学位
大多数机器学习问题可以描述为数据项加约束项的形式。当约束项是稀疏约束,即需要求解的稀疏或在某个域内稀疏时,则问题转变为稀疏约束问题。稀疏约束问题具有广泛的研究意义,如图像去噪、信号恢复、超分辨率、压缩感知和神经网络剪枝等任务都属于稀疏约束问题。稀疏约束问题的求解越来越受到学者的重视。本文的目的是寻找性能优良的解决稀疏约束问题的方法,重点研究以下三个具体问题:1.近年来,可学习迭代收缩阈值算法(Le
学位
随着人流量的不断增大,出行需求的不断加深,出于安全的考虑,安检X光危险物检测方法需要不断更新不断改进才能满足人民日益增长的出行需求和安全保障,但目前的安检工作还是主要依托于人工检测,以人为主,智能检测为辅,安检的效率和速率一定程度上取决于安检人员的精力和经验,这样很容易发生错检和误检,安全隐患很大。如何实现高效快速的自动化检测是本文研究的重点。本文探索了YOLOV4目标检测方法在安检X光危险物检测
学位
遥感目标检测技术旨在对遥感图像的目标实现定位和识别,在民用和军事等领域发挥着重要的作用。然而,实际场景下的遥感目标检测面临着诸多问题和挑战。比如,如何解决由于样本标记工作专业性强、成本高导致的标记样本缺失的问题;如何有效挖掘遥感图像中复杂场景下的目标特征,在不影响检测效率的情况下提高检测精度;如何更高效地训练检测器,让特征层提取出的特征更好地发挥作用。针对上述问题,本文深入分析了人脑高效认知目标的
学位
[目的]分析慢性鼻窦炎患者的变应原谱、血清总IgE和血清特异性IgE的特点,探讨变态反应在慢性鼻窦炎中的作用机制。[方法]收集2016年7月-2018年10月期间收入本院耳鼻咽喉头颈外科的变应原检测阳性的慢性鼻窦炎患者160例,根据《慢性鼻-鼻窦炎诊断和治疗指南(2012)》分为79例慢性鼻窦炎伴鼻息肉组(CRSwNP组)和81例慢性鼻窦炎不伴鼻息肉组(CRSsNP组),同期91例变应原检测阳性的
学位