基于编解码网络和特征编码的图像语义分割方法研究

来源 :江西理工大学 | 被引量 : 0次 | 上传用户:jtzou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义分割是计算机视觉中最基本的任务之一,对图像理解起着关键作用,并且在许多实际应用中有重大影响,例如自动驾驶、机器人和医疗图像诊断等。近年来,虽然基于深度卷积神经网络的语义分割研究取得了显著进步,但还是存在不少挑战。本文基于深度学习技术,从两个方面研究了基于深度卷积网络的语义分割模型,分别是通过融合上下文语义信息和空间信息提高语义分割准确度的研究,以及通过弹性特征金字塔模块减少语义分割的时间复杂度、达到实时语义分割的研究。本文所做工作具体阐述如下:首先,本文对当前基于深度学习的语义分割算法展开详细地概述,细致地介绍了图像语义分割常用的深度模型框架。接着,按照提升网络感受域的方法、基于特征融合的方法、基于注意力机制的方法和基于神经网络架构搜索的方法这四个维度,对当前最有效的语义分割方法进行论述。最后阐述了未来最有前景的实时语义分割方法。通过对当前语义分割方法进行回顾,能够清晰地了解语义分割研究的发展历程,以及为相关的研究人员启发研究思路。其次,当前图像语义分割研究基本围绕如何提取有效的语义上下文信息和还原空间细节信息两个因素来设计更高效算法。为了提升网络的语义表达能力,同时建立像素点之间的空间位置关系,本文提出了一种新的基于上下文和浅层空间编解码网络的语义分割解决方案。在编码端采用二分支策略,其中上下文分支设计了一个新的语义上下文模块来获取高质量的语义上下文信息,而空间分支设计成反U型结构,并结合链式反置残差模块,在保留空间细节信息的同时提升语义信息。解码端,本文设计了优化模块对融合后的上下文信息与空间信息进一步优化。所提出的方法在三个基准数据集CamVid、SUN RGB-D和Cityscapes上取得了有竞争力的结果。最后,高质量的语义分割模型需要大量的计算资源,为了实现实时性应用,本文提出了一种特征编码融合网络,为了能够编码多尺度特征信息同时减少内存开销,设计了弹性特征金字塔模块作为特征提取网络的基础构建模块。接着在特征提取网络末端设计了多路径语义模块以优化语义特征的学习以及梯度的反向传播。最后通过双注意力融合模块有选择性地融合不同层级的特征。所提出的方法在CamVid和Cityscapes数据集上使用较少的参数和更快的处理速度完成了城市道路场景的语义分割任务。
其他文献
“在各个方面的努力和支持下,义务教育有保障的目标基本实现。”日前,在国务院新闻办举行的新闻发布会上,教育部副部长郑富芝介绍了决战决胜教育脱贫攻坚、实现义务教育有保
教师要主动适应时代变化,依法执教,在心里建起一道“防火墙”,并积极增强育人智慧和应变机智。校长要有教师情结,勇于担当,积极构建完善处理机制。
裤子是什么?对于中国房地产市场来说,就是产权制度。如果一个人只穿上衣,不穿裤子,我们不能说这个人没有穿衣服,因为他的确穿了上衣,然而因为最关键的地方裸露着,我们会说这个人穿衣
美联储正在创造自己的历史。它全方位地扮演着“救火队员”的角色,这是其成立95年来几乎没有的。用美联储前主席沃克尔的话说,美联储的本职是为商业银行提供融资,
在河西走廊上,留存着大量的历史文化遗迹,散存在民间的各个角落。古浪老调,就是散存在武威市古浪县民间的一块瑰宝。虽然现在无法追溯到老调的确切诞生时间,但是纵观老调的发
纵观2009年中国经济发展有一个鲜明的特点,就是随着一系列刺激政策的实施,国民经济增速逐步回升,中国经济热度明显升高。世界银行决定将2009年中国GDP增速预测由此前的7.2%调高至8
在次贷危机背景的烘托下,雪灾、出口增速减缓以及资本价格的明显调整,一度主导了各界对宏观经济走势和调控政策的讨论,要求适时放松紧缩调控的声音此起彼伏。然而,诸多创纪录的1
“三师制”管理教学模式下的“导师制”,运行顺利,取得了良好成效,在导师的选择上,部分学生想到了校长,准备请校长做他们的“导师”。在精心的“设计”下,他们达成了目标。校
为了突破西医院校培养中医本科生的瓶颈,更好地培养有中医思辨能力的学生。温州医科大学第二临床学院中医教研室进行了中医本科实习与师承教育相结合的探索,引入"师带徒"的实
等温锻造是一种先进的加工工艺。本文从钛合金高温变形特性、等混锻造参数选择、模具设计、润滑剂摩擦特性等诸方面全面地介绍了这种先进的锻造工艺,它的应用前景及发展方向。