基于多层信息融合的FCN模型语义分割方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:apple41900
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义分割是图像理解过程中的一个关键问题。目前全卷积网络(Fully Convolutional Network,FCN)成为语义分割任务的主流模型。但是网络中多次重复的下采样和反卷积操作导致图像信息过多损失,同时在特征学习过程中也存在忽略像素与像素之间的关系、缺乏空间一致性等问题。因此FCN模型的分割效果并不理想,很容易出现边缘模糊和杂散区域的情况。近几年,相继提出了许多基于FCN改进的语义分割方法,语义分割精度也不断提高。但是大多数的语义分割模型都存在计算复杂、参数过多等缺点。基于以上研究现状,本文以提高图像的分割精度为目标,在FCN模型的基础上进行改进,提出了两种简单而有效的语义分割算法:一是基于底层轮廓信息的FCN模型语义分割方法;二是基于空洞卷积和多层特征融合的FCN模型语义分割方法。具体介绍如下:(1)基于底层轮廓信息的FCN模型语义分割方法,克服了传统FCN模型中由多次卷积和采样操作导致的边缘轮廓过于模糊的问题,有效地提高语义分割精度。该方法在FCN模型基础上,增加了一条并行卷积支路,使其在学习图像高层语义特征的同时,可以检测到底层轮廓信息。FCN模型初始分割完成后,利用检测到的图像底层轮廓信息对分割结果进行轮廓修复。在增加的检测支路中,设计多个侧边输出,以鼓励模型的每个层都对最后的检测结果有一定贡献。最后实验表明,在轮廓检测中利用多个侧边的检测输出所得到的轮廓信息比仅仅利用最后输出结果所得到的轮廓信息更清晰。在语义分割方面,通过对比引入底层轮廓信息前后的分割结果验证了此方法的有效性。(2)基于空洞卷积和多层特征融合的FCN模型语义分割方法通过减小数据在学习过程中的缩放次数以保留更多有用的信息,同时显式融合所有卷积层的输出信息,从而提高分类预测的准确度。基于空洞卷积的语义分割模型是在传统的FCN语义分割模型上进行改进的,具体如下:移除FCN模型最一个的池化层,同时为保证模型的感受野不变,将第5阶段卷积层中的卷积操作用空洞卷积替代,减少数据缩放的倍数,增加图像在学习过程中的有用信息,提高语义分割的准确度。本文还设计了一种基于卷积层的多层特征融合结构,显式地融合所有卷积层学到的特征,弥补语义分割模型在预测过程中过多信息丢失的问题。最后通过设计多组对比实验,验证了本算法的可行性和有效性。
其他文献
在明晰邳州文化特征和板材产业集群发展历程的基础上,运用访谈和问卷调查方法,从心智模型、社会资本和非正式制度三个层面,分析邳州板材产业集群演化的文化机理。研究表明:文
高中英语课堂上,学生是否自愿回答教师提问受到多种因素的影响:教师问题的设计、教师问题的呈现、教师评价语的使用、学生学业水平、学生心理状态差异等。为更好地开展课堂教
目的研究微创关节镜在军人膝关节纵向撞击军事训练伤中的应用。方法回顾性分析第三军医大学大坪医院关节四肢外科2006年1月至2015年1月门诊收治的因纵向撞击军事训练导致的膝
运用物理学知识建立了游泳出发过程的数学模型.采用优化算法求得出发过程的最佳参数,并对出发台出发过程中的各影响因素进行了灵敏度分析,确定了各影响因素的主次关系,为制定
<正>农牧业企业的产业化发展离不开强有力的资金支持,需要创新融资方式,扩大融资渠道。然而,由于目前面向农牧业企业的融资体制的不健全、农牧业企业自身在经营过程中受到融
贵州织金含稀土磷矿床是一稀土资源蕴藏量较大的磷矿床,稀土储量达上百万吨。含稀土生物碎屑白云质磷块岩为主要矿石类型,并占磷块岩的95%以上。磷块岩呈灰黑色、深灰-浅灰、
Zeugma(轭式搭配法)是指一个词用来修饰或支配两个或两个以上的词,其中只有一个搭配合乎逻辑或语法的一种修辞手段.它有多种表现形式.这种修辞手段的巧妙运用,能达到某种特殊
密执安大学研究中心在1979年4月所做的一次调查表明:大多数美国人只会讲英语,不会讲其它语言,但是其中半数人希望能讲外语。本调查也报导说,四分之三的美国人认为应在小学里
目的:调查了解2013年四川省农村居民住院医疗服务费用现状;并探讨15岁以上居民住院医疗费用的影响因素。方法:利用2013年四川省第五次卫生服务调查家庭健康问卷调查的数据了解
目的通过妇女病普查,检出妇女所患各种疾病和恶性肿瘤,做到早发现、早诊断、早治疗。方法由妇科医师对辖区内30~65岁的已婚妇女进行免费查体。2010年红桥区妇女查体共16 162人