基于卷积神经网络的道路场景图像语义分割方法

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:atmywb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机视觉是当前人工智能领域重要的研究方向和突破口之一,图像语义分割技术是计算机视觉领域中的一个热点研究方向。图像分割技术是通过对输入图像进行逐像素点分类,将图像分类拓展到像素点分类,然后运用到计算机视觉的各个领域,图像分割技术已被广泛服务于图像检索、视频跟踪、目标识别和机器人导航等多种实际视觉应用场景。图像分割技术对解决机器人视觉问题有重要意义。目前的图像语义分割算法一般可分为传统分割方法和基于深度学习的语义分割方法两大类。针对无人驾驶对道路场景图像语义分割任务的需求,本文基于深度学习的方法研究语义分割问题,尤其准确的分割出复杂道路场景中对无人驾驶安全性更为重要的目标。使用深度学习方法进行图像语义分割,一般首先使用卷积神经网络结构来提取多级特征图,然后使用上采样的方法来使特征图恢复成原始图像大小的分割结果,达到逐像素点分类的目的。本文的主要工作包括:(1)将道路场景中的各类目标划分重要性等级,设计了一种重要性加权的道路场景图像分割算法,使得模型能更准确地分割道路场景中对无人驾驶安全至关重要的目标,同时对所定义的重要性等级低的目标区域的分割精度影响有限。本文使用City Scapes数据集以及Camvid数据集训练使用本文提出的算法优化的网络模型,并验证方法的有效性和泛化能力。(2)提出邻域类别相关性得分机制及跨层特征融合的网络结构,同时使用迁移学习和微调来优化道路场景的图像语义分割。本文采用了改进版的Res Net101,即Res Net101(V2),并且和邻域类别相关性得分机制及跨层特征融合机制进行结合,然后进行迁移学习。迁移学习和微调的目的是优化邻域类别相关性得分机制用于图像语义分割的神经网络结构的编码器(卷积层部分),验证它们在道路场景的图像语义分割中的表现,这种表现的评价包括分割精度和Mean Io U指数。(3)条件随机场在优化图像分割的平滑性和边界的处理上,有着不错的效果。本文提出的邻域类别相关性得分机制及跨层特征融合结构,经过一定的参数调整,在边界处理上同样有着很好的效果。为了验证本文提出的结构的边界处理的效果的优劣。在进行重要性加权算法的基础上,分三组做对比试验,分析实验结果。1)只使用邻域类别相关性得分机制及跨层特征融合结构进行图像语义分割。2)只使用条件随机场进行图像语义分割。3)同时使用两种方法进行图像语义分割。比较三组实验的结果,以便在合适的情景下选择对应的方法。
其他文献
切测度作为当代几何测度论之最为重要的技术工具之一,其在奇异积分与rectifiability之关系的研究中起重要的作用。切测度可用来刻画一个测度的局部性态。切测度在许多方面都有其应用,例如在PDE、变分、调和分析和分形方面的研究。 本文系统研究了切测度的几何特征以及对于测度之切空间的几何特征。给出了切测度、测度具有rectifiability性和平坦性的判定条件。同时,对切测度分布、vari
当前空中交通管制(以下简称空管)导航设备的台站管理依赖人工,图像监控系统依靠远程摄像头通过数据采集回传至监控室由工作人员进行监控。这种模式依赖人工,容易造成工作人员疲劳工作,造成民航运营的隐患。因此本文研究提出了一种基于图像识别的远程空管导航设备监控系统,利用监控系统中的图像识别算法自动获取仪表图像信息,得到准确的仪表读数,空管通导部门变被动监控为主动识别安全威胁,将一般监控系统的事后分析变成事前
本文应用多柔体系统动力学建模技术,实现了大型航天器的部件离散,建立了包含中心刚体、柔性附件、充液贮箱在内的航天器动力学模型,分别研究各部件的动力学特性,利用虚功率原理进行组合分析,推导出整体的姿态运动方程,并设计开发了软件。针对柔性体动力学特性难以分析计算的特点,通过模态分析与综合方法实现了太阳帆板类器件的离散化,降低了方程计算的维度,提升了计算效率;针对流体力学研究方法复杂的问题,以单摆——质量
学位
工业炉是工业生产中非常重要的设备,其温度控制在生产过程中尤为重要,但工业炉炉温系统具有很强的非线性、强耦合性和延迟特性,很难对其进行准确建模,使得其温度控制品质难以保证。预测控制方法不依赖于精确模型,采用滚动优化的方式,利用滚动的有限时间段优化取代一成不变的优化,更符合实际生产工况。神经网络是根据历史数据构建的模型,能精确逼近不确定非线性模型,可以将神经网络作为其预测模型。基于上述情况,本文主要做
本文的主要目的是系统研究靶流形为Heisenberg群的函数及其空间的性质,其中包括Lipschitz及Hlder连续性、空间Lp(Ω,Hn)及W1,p(Ω,Hn)的性质、空间BMO(Ω,Hn)的性质及其上的John-Nirenberg估计、嵌入定理、Poincare不等式和逆Poincare不等式、能量极小映射的存在性、正则性及用调和函数逼近能量极小映射等问题。另外我们还研究了Heisenber
某些刚体或多刚体系统以特定构型在粗糙表面运动时,结合库伦摩擦定律理论求解单边约束的机械系统动力学方程时会出现无解或者多解的情况,该现象被称作为Painlevé悖论(Painlevéparadox)。悖论现象在许多涉及接触问题的机械系统中广泛存在。在对各类经典刚体动力学问题的研究中,Painlevé悖论问题的发生机理仍未被彻底解释清楚,且对该问题的研究多关注于从理论层面避免悖论现象的发生,而较少探究
近年来,使用偏振参数来表征生物组织结构特性成为一种新兴的研究方向。生物组织的异质和高度散射性质会很大程度上导致偏振信号信息的变化或丢失。开发高灵敏度的测量和有效的数据分析方法来解决这问题是目前主要研究方向之一。本文主要的工作有基于BX51显微镜,增加了模式化偏振调制模块来进行偏振光调制,并推导出样本的消光角和相位延迟量、出射光斯托克斯(Stokes)参数的表达式,随后对几种组织病理切片进行成像实验
验证码技术提供了一种自动区分人类和机器的手段,在网络防护和信息安全方面有着广泛的应用,例如身份鉴定以及抵御计算机自动攻击和资源滥用等。验证码的设计是基于人工智能领域的开放性问题,有效利用人和机器在解决此类问题上的鸿沟,避免恶意机器程序滥用网络服务。因此,验证码的识别与反识别究其根本是验证码生成技术与人工智能技术的对抗。近年来,由于人工智能技术的发展和网络攻击手段的提升,验证码面临越来越严峻的挑战。
学位