基于深度神经网络的全景分割算法研究

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:xsw2233
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像全景分割是近几年被提出的机器视觉中的一个新的挑战。它要求在像素级别下为图像中每一个像素分配不同的类别或实例。换句话说,全景分割不仅要求分割可数的前景,还要求分割不可数的背景。当前全景分割任务的主要挑战是分割对象的遮挡和融合问题,其中遮挡问题可以从特征提取和损失函数两个角度考虑。融合问题需要设计一个全景融合模块,该模块的任务是精准的融合同一图像下的前景和背景。传统的图像分割方法通常基于阈值或者基于聚类和超像素来实现图像的分割。但是这些方法往往没有良好的准确度。除此之外,传统的图像分割往往止步于语义分割,并不能进一步的区分不同实例。随着GPU算力的逐年增强,基于深度神经网络的图像分割方法越来越多并且取得了良好的分割效果,为了更好地实现全景分割这一具有现实意义的挑战,本文主要从以下三个方面进行设计来实现最终的全景分割任务要求。(1)并联空洞卷积与残差的骨干网络。主流的语义分割方法一般是使用带有跳跃连接的残差网络来产生清楚的语义特征。但是残差网络并没有摆脱传统卷积网络的缺点,即图像分辨率会随着网络的深度的增加而下降。因此一种并联空洞卷积和残差网络的骨干网络被提出以实现更精细的语义分割特征,这种新的方法在CHAOS数据集上比其他基于深度学习的方法在不同评价指标上结果提高了1%-4%不等。(2)增强实例支路与语义支路的联系。全景分割两条子支路分别为语义分割和实例分割,在端到端全景分割网络中,它们虽然共享骨干网络提取的特征,但是彼此之间没有联系。本文提出一种多尺度空间通道前向激励机制,通过同一层特征输出的两条激励支路来加强语义分割支路和实例分割支路之间的联系,同时提出一种改进的空洞空间金字塔模块,使得该模块在保留图像级信息的同时避免了上采样的幅度过大引起的信息丢失。本章实验基于COCO数据集和Cityscapes数据集,最终的效果比Baseline在各项评价指标上要提高了2%左右。(3)新的全景融合模块和改善实例遮挡。一种新的融合机制在本文被提出以获得良好的全景分割结果,这种机制要求网络在语义支路预测的时候将输出通道设置为数据集前景和背景的类别之和,然后将输出通道分为语义结果和多通道实例结果。通过这种方法得到的实例结果与Mask R-CNN支路的实例分割的结果按照标签相加后替换掉上述的多通道实例结果。除此之外,还提出一种基于置信度排序的模块来改善遮挡问题,在COCO2017和Cityscapes上的实验结果证明了提出的全景分割网络的有效性。
其他文献
随着我国化工业的发展,危险化学品的应用范围越来越广。酸作为最被人熟知的危化品之一,在方便人们生活的同时,也隐藏着巨大的安全隐患。由于酸液的危险性质,其在生产、储存、运输、经营、使用等环节均会由于操作不当造成事故,引发经济损失。据调查,小型企业、实验室自动化控制水平较低,更易发生安全事故,因此本文研究并设计了一套小型浓酸自动配液系统。该系统使用机器代替人工配酸,不仅极大的降低了酸液使用时的安全风险,
学位
以风电为代表的清洁环保电力大规模介入互联电网,其出力不确定性给系统发电侧带来大量有功扰动,影响系统功率平衡状态,造成电网频率波动。本文研究有风电介入的负荷频率控制问题,运用模糊控制、云模型控制等不确定性智能控制技术解决风电并网带来的频率波动问题,提升电网的负荷频率控制品质,进而提高风电的渗透率与消纳水平。首先,在对负荷频率控制系统各部分的数学模型进行研究的基础上,建立各模块的低阶线性化模型,建立有
学位
随着化石能源的日益减少和环境污染问题日益加剧,迫使世界各国亟需寻找可替代的能源。风能以自身清洁和资源充足的优点在新能源发电技术领域引起了人类的高度关注。然而,由于风能的随机性和不确定性,使得偏航系统频繁启停以进行迎风动作,从而给风电机组稳定运行带来挑战。本文分析了偏航系统静态误差和偏航策略误差产生的原因,以华北某风场四种类型风机为背景,从以下几个方面展开了研究。首先,论文对偏航系统工作原理及工作模
学位
高校教师党支部书记“双带头人”培育工程和高等学校课程思政建设,都是夯实为党育人、为国育才的重要抓手。文章以柳州职业技术学院基层党支部建设为例,阐述基于高校教师党支部书记“双带头人”培育工程的“党建+课程思政”改革与实践,提出“‘一室’打头阵、‘二化’控质量、‘三全’促成效、‘四情’润人心”的“党建+课程思政”实施路径,以推动党建工作和业务工作双融合、双促进,落实落细立德树人根本任务。
期刊
随着经济全球化进程的加快,翻译服务的重要性逐渐体现。从统计机器翻译到如今的神经机器翻译,机器翻译技术走过了漫长且辉煌的历史。目前基于数据驱动的神经机器翻译已经达到了不错的效果,但是在专业翻译领域以及语言资源稀缺的语种翻译任务中还是难以达到专业译员的期望。因此,开展交互式机器翻译的研究是未来的研究趋势。以往的交互式机器翻译大多是基于统计机器翻译,本文在神经机器翻译基础之上,开展了基于机器学习的交互式
学位
进入新世纪以来,我国不断加大实施“走出去”战略的力度。在全球经济一体化的背景下,大批企业以引入国际因素为策略性抓手,推动企业绩效的提升。实施海外专利布局战略已经成为企业抢占海外市场份额的重要突破途径。因此,研究企业海外专利布局与其绩效的关系将具有重要意义。本文的研究结果可为政府制定引导企业实施国际战略的政策、企业以海外专利布局策略为抓手提升海外经营能力、企业发明家对研发项目及项目目标市场的选择提供
学位
19世纪末20世纪初,资本主义进入垄断阶段,跨国公司开始出现。毫无疑问,由跨国公司带来的外商直接投资,对各国经济发展贡献显著。然而,跨国公司为合理配置资源和减少风险,尤其是实现避税目的,针对各国税制差异,利用设立在避税地的受控外国公司有意推迟利润分配或利润分配后不汇回,以达到推迟或避免履行母国的纳税义务效果。事实上,跨国公司利用受控外国公司避税的情形已引起各国普遍关注。基于此,BEPS第三项行动计
学位
成人高校党建工作和课程思政工作在目标任务、价值导向层面存在着共通性,但也存在着差异性。构建“党建+课程思政”的机制须自上而下转变思想观念、优化既定框架、确定责任主体、形成新的工作体系。加强党建与课程思政的良好互动,能够助推成人高校党建和课程思政工作高质量发展。
期刊
随着新时代我国社会经济的飞速发展,电力负荷的变化情况越来越复杂。由于负荷的随机性,电力系统所面临的调峰调频压力也越来越大。所以,通过对负荷特性进行详细建模,分析其关联的主要因素并实现准确预测,对把握负荷的不确定性、提升电力系统调度运行的技术水平具有重要意义。本文针对不同类型负荷的特性,考虑了多种关联因素,开展了负荷特性建模研究,并提出了相应的短期预测方法。首先,分别针对商业负荷、居民负荷和工业负荷
学位
文章立足建筑学专业特色深入发掘课程内外思政资源,坚持立德树人,探索了建筑学专业如何将“党建党史+课程思政+专业教学”相融通的整体思路与实践,即:以党员教师、学业导师为党建思政引领,线上与线下结合,第一课堂与第二课堂相协调,教学与育人成果展示分享等实践,把思想政治工作贯穿建筑学专业教育教学全过程,实现全程育人、全方位育人。
期刊