基于压缩感知与深度学习的前后背景分割技术研究

来源 :河南大学 | 被引量 : 0次 | 上传用户:czp168
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
前后背景分割技术是计算机视觉领域中重要的研究方向之一,该技术逐渐成为计算机应用领域中提供准确目标类别、位置信息的一项重要技术。当前,很多前后背景分割技术均是完全基于软件实现的,但是在实际应用中,面对海量的高清数据,必然存在着数据量大、传输时间久、计算资源消耗大等问题。虽然通过对图像直接进行下采样可以降低数据量,但是下采样会导致图像细节特征信息严重丢失,从而导致分割精度降低。如何将软件与硬件相结合,在有效降低数据量、减少计算资源消耗的同时保持高分割精度成为前后背景分割技术所面临的难题。针对以上问题,本文进行了如下研究。(1)提出一种多域压缩数据高效获取方法,以解决面对海量高清数据存在的数据量大、传输时间久,计算资源消耗大的问题。该方法结合成像探测器内部的成像特性,运用压缩感知原理,将图像信息稀疏表示,然后进行采样得到原始图像在空域和压缩感知域两个不同变换域的压缩数据。该过程中使用的新型感知矩阵包含两个子矩阵,分别对应成像探测器内部的Binning下采样模块与压缩感知模块,其中Binning下采样模块获取得到空域缩略图,压缩感知模块获取得到压缩感知域观测值。相对于传统的压缩感知方法,该方法在获取压缩感知域的观测值同时获取了空域的缩略图,具有包含图像空域特征信息的优势,并且成像探测器内部不再需要额外的图像重构模块,可进一步提升成像探测器内部的空间利用率。相对于图像下采样技术,该方法获取了保留全图信息的压缩感知域观测值,具有避免图像细节特征丢失的优势。通过实验验证分析,本文所提出的多域压缩数据高效获取具有数据获取效率高,占用存储空间小,包含特征信息丰富的优势,为下一步基于多域特征融合的前后背景分割方法提供了有力的支撑。(2)提出一种基于多域特征融合的前后背景分割方法,以解决基于深度学习的前后背景分割研究在面临压缩数据时,因学习特征域单一而造成的分割精准度提升难的问题。使用硬件上获取的原始图像在两个不同变换域的压缩数据分别作为多域特征融合前后背景分割网络的两个输入,在深度学习中,借鉴模态融合的思想,把两个不同的变换域近似看作两个不同的模态,分别对两个不同变换域的压缩数据进行特征提取,采用决策级特征融合方式,融合空域和压缩感知域两种不同变换域的特征,对融合的特征进行前后背景分割。相对于以原始图像数据作为输入的前后背景分割网络,该方法因使用了两个不同变换域的压缩数据而具有数据量小、效率高的优势;相对于仅以缩略图数据作为输入的前后背景分割网络,该方法因融合了两个不同变换域的特征而包含更丰富的特征信息,具有分割准确度高的优势。通过实验验证分析,本文所提出的基于多域特征融合的前后背景分割网络优于传统的前后背景分割网络,在保持较高分割精度的同时,又保持了较高的分割效率,该方法为下一步在项目中的应用提供了有力的支撑。(3)将本文所研究内容应用于《XX数据高速高保真压缩与重构方法研究》项目中。多域压缩数据高效获取,用在了该项目中硬件部分,在FPGA硬件开发板上进行实现;基于多域特征融合的前后背景分割技术,用在了该项目中的软件部分,在上位机软件上进行实现。软件与硬件之间通过UDP协议实现数据的传输。通过软件与硬件相结合的方式实现了对多域压缩数据直接进行高精度的前后背景分割,在保持分割精度的同时提升了分割效率。
其他文献
共识算法作为区块链的核心,其性能直接影响区块链系统的效率。行动证明共识算法(Proof of Activity,Po A)是一种结合工作量证明和权益证明的混合式算法,具有易扩展网络结构、处理事务速度更快等优点,但也存在节点间信任缺失、代表节点离线造成区块丢弃等问题。针对以上问题,本文提出了两种改进的共识算法,并设计了可溯源学业信息监管系统的共识框架和整体架构,具体研究内容如下:(1)针对Po A算
学位
人脸图像修复和超分重建作为图像处理领域中的组成部分,在实际场景中具有重要价值。人脸识别通过采集人脸图像识别人物身份,但由于物体遮挡、光线明暗、网络通讯等因素的影响,造成人脸图像出现局部遮挡和分辨率不足等问题,从而破坏面部特征信息,影响识别的成功率。现有基于深度学习的图像修复和超分重建技术虽然取得一定进展,但仍存在修复图像模糊、重建图像出现局部失真和高频特征缺失问题。为此,本文基于GAN对人脸图像进
学位
互联网用户的不断增加引起了文本数据的大量增长,以及评论文本中用词的多样化、复杂化,单纯地依靠专家经验,或者是人工检索来处理这些海量数据显然是不可行的,因此更加智能化的自然语言处理技术对于解决这一问题就显得尤为重要。随着研究的深入,情感分析技术在文本处理中多有应用,本课题以深度学习及多任务联合学习为基础,针对细粒度情感分析存在的问题,做出以下研究:(1)针对卷积神经网络只能获取局部单词间的依赖关系,
学位
图卷积网络具有能聚合和转换节点邻域内的信息生成节点表示的能力,因此受到广泛关注。分类任务作为评测模型嵌入效果的重要标准,是图分析任务里一个重要的研究方向。由于社交网络有连接复杂、噪声较多等因素,暴露了现有的模型存在依赖图结构、局部结构被忽略等问题,导致无法得到有效的特征表示。针对这些问题,本文基于图卷积网络对节点分类与图分类方法进行研究。具体工作概括如下:(1)针对现有图卷积网络在节点分类中依赖图
学位
超分辨率重建可以从细节模糊的低分辨率图像中重建出分辨率更高且细节信息更丰富的高质量图像,在工业领域、军事领域等诸多领域中均有着很高的应用价值,因此一直是计算机视觉领域中的研究热点。单幅图像超分辨率重建通过探索图像内的自相似性进行重建,受限于图像本身有限的信息,其重建结果也受到了一定的限制,而视频超分辨率重建则可以利用更多相邻帧的信息帮助重建。但是,如何高效充分利用相邻帧间的时间及空间相关性信息进行
学位
在低性能多媒体设备和物联网系统迅速发展的今天,低计算精度环境下安全高效的图像加密技术有着很大的需求。主流的以混沌系统为支撑的图像加密方法往往不仅在速度上不尽如人意,而且在低精度计算环境下安全性无法得到保障,有些甚至无法正常运行,因此人们的需求无法得到满足。本文通过对以上问题的思考与研究,提出了不依赖于混沌系统的两种图像加密方法,一种是单张的图像加密方法,另一种是批量图像加密方法。(1)提出了一种深
学位
近些年,联邦学习发展迅速也更广泛地运用到了我们的实际领域应用中,联邦学习中的隐私安全与通信效率问题也同样受到了更多的关注与研究。其中,链式结构和压缩技术作为联邦学习中的重要解决方案,通过结合这两种方法,可以在保证用户隐私安全的同时提高联邦学习训练中的通信效率。本文首先对联邦学习的背景和研究现状进行了有关介绍,对一些经典的隐私保护算法进行了详细地分析。针对现有隐私保护方法及通信优化方法在联邦学习中不
学位
随着互联网技术日益强大,网络数据量呈指数增长,人们在众多文本中寻找有用信息变得繁琐。文本自动摘要技术的出现,帮助人们快速提炼文本中的有效信息。文本自动摘要技术主要分为抽取式和生成式两类,其拥有不同的原理和使用场景。目前,基于编解码网络的抽取式摘要模型存在对重点语义捕获能力较弱以及解码时语义损失过多的问题;基于编解码网络的生成式摘要模型存在全局相关度低以及记忆节点信息计算片面的问题。本文对上述问题提
学位
随着深度神经网络的兴起,视觉目标跟踪领域获得了飞速地发展,其在无人机、智能监控、无人驾驶等研究领域均有广泛地应用。基于孪生网络的目标跟踪算法,因其在跟踪鲁棒性和时间效率等方面达到了一个良好的平衡效果,而引起了国内外学者的广泛关注。因此,大多数科研人员将主要研究目标放在了如何提高孪生网络跟踪算法的鲁棒性上。本文研究的主要对象是孪生网络跟踪算法及其改进。具体研究内容如下:(1)针对在具有相似语义信息干
学位
随着光谱成像技术的不断进步,高光谱遥感图像能够对探测到的目标地物进行精细地识别,图像中的每个像元记录着几十甚至上百个连续波段的光谱信息,使辨识每个像元变得容易起来。高光谱图像的这种特质使得其在环境监测、精准农业以及航天等领域产生了重要价值,但是高光谱图像在采集以及传输的过程中不可避免地引入不同类型的噪声,无论是有监督还是无监督的高光谱图像分类,原始图像中都存在高斯噪声、椒盐噪声等不同类型混合噪声,
学位