基于深度学习的实时街景语义分割方法研究

来源 :东华大学 | 被引量 : 0次 | 上传用户:kygl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,得益于卷积神经网络特征提取能力的增强,其在计算机视觉的诸多任务中占据了愈发重要的地位。作为计算机视觉领域的重要分支,图像语义分割随着卷积神经网络的发展,也在不断取得突破。传统的图像语义分割方法受限于模型的特征提取能力,往往不能够提取到深层次的语义信息,造成分割精度低,鲁棒性低。将卷积神经网络带入图像语义分割领域后,极大提高了分割精度,拓宽了应用场景。由于卷积神经网络运算量大、复杂度高,容易造成分割用时过长、模型过大,难以应用到实时性场景中去。某些需要满足低延时的应用场景如自动驾驶场景,对于模型的运行速度有这更严苛的要求。如何设计网络模型在分割精度和分割效率之间取得平衡尤为重要,因此在实时语义分割中兼顾模型的速度和精度具有重要的研究意义。本文针对这一任务开展研究,具体如下:首先基于DeepLabV3+方法,提出了融合注意力机制与金字塔结构的实时分割方法。该网络致力于在保证一定分割精度的基础上,获得更快的推理速度。主干网络利用减少通道数的方式减小计算消耗。对于空间空洞金字塔池化模块,将普通卷积替换为深度可分离卷积,并对池化分支进行分层堆叠。利用空间注意力机制和通道注意力机制构建注意力特征融合模块,将不同维度间的特征高效融合。通过实验证明,融合注意力机制与金字塔结构的实时分割方法相对于其他方法在拥有相似分割精度的前提下,获得了更高的实时性。其次提出了基于空洞沙漏模块与空间分支的实时分割方法。面对实时性要求更高的自动驾驶场景,对网络模型的推理速度提出了更高的要求。以编解码器结构为基础,编码器部分利用快速下采样模块在初期迅速减小图像尺寸,接着将空洞沙漏模块作为主干网络特征提取单元,最后连接改进的空洞空间金字塔池化模块。空间分支并行于主干网络,用来提取原始输入图像的空间信息,最后借助注意力特征融合模块将空间信息和高维度语义信息进行融合。解码器部分,利用双线性插值进行上采样。综合实验表明,基于空洞沙漏结构与空间分支的实时分割方法在分割精度和分割速度上表现出色,可以应用到自动驾驶等实时场景中。最后基于上述算法为基础,结合PyQt5工具包、Socket技术,实现了本地街景图像导入、局域网街景图像采集、图像分割展示等功能。为评判算法的分割性能提供了可视化界面,并对利用无线传输图像实现分割的方式进行了探索。
其他文献
英国近代前期乌托邦作品具有多样化特点。陆续出现过“开心乐土”“阿卡迪亚”“完美道德之邦”“乌托邦”和“千禧年”等多种模式和名称。经过数百年的筛选,以“乌托邦”最为流行。在题材上则有政论、游记文学和诗歌等。与乌托邦模式、题材多样化并行的是其阶级属性的多元性。这是由于乌托邦思想的阐发者和代言人,有着形形色色的社会背景和阶级面貌,他们作为知识精英,代表着不同阶级和群体的利益,有着不同的立场和视角,表达出
优良的地方品质是各地区集聚人才与各类创新资源、提升竞争力的关键资产。文章基于数字经济时代、“双循环”新发展格局、高质量发展背景以及流动人口现象、“全国文明城市”品牌等中国情境,构建了由环境、经济、社会、幸福四个子系统、共计24个三级指标构成的省域地方品质评价指标体系,采用熵权TOPSIS法测算分析了2010—2019年各省份的地方品质指数,并进一步挖掘了关键的制约因子。
<正>世界卫生组织报道,全球范围内脑卒中死亡的69%、冠状动脉粥样硬化性心脏病(冠心病)死亡的46%归因于高血压控制不良。因此,有效控制血压是预防或减轻心脑血管病风险的主要突破口。《国际高血压学会(International Society of Hypertension,ISH)2020国际高血压实践指南》是由多位高血压及相关领域资深专家起草,并经由分布于全球的多个国家和地区专家参与讨论和评阅而
期刊
民主溪是大田县境内重要河流水系,且该流域作为连接三明市与大田县的重要节点,地理位置极为重要。近年来因人为活动及过度耕牧造成该流域的生态遭受严重破坏,通过对该溪流域现状分析,在设计过程中充分利用水生生态系统退化过程的科学知识,以及目前正在应用的人工改造河流中的生态理念,以寻求恢复或改善区域生态环境。
创建HSE管理体系和对危险源进行风险管理是目前天然气企业发展的需要,故对这两方面的研究尤为重要。在总结前人研究成果的基础上,通过分析风险管理的理论基础和研究HSE管理体系的创建过程,本论文以山西省2016-2019年重点项目某气田井区开发项目为依托,参照国内外先进的天然气企业的HSE管理体系,建立一套科学、客观、实用的HSE管理体系手册,并建立了危险源辨识与风险评价的模型。主要研究内容如下:(1)
河口湿地是陆海相互作用强烈的重要地球关键带,同时还受到人类活动的强烈影响。黄河三角洲湿地作为年轻的暖温带河口湿地,其微塑料污染状况尚未得到充分研究。现已对黄河三角洲湿地表层沉积物中微塑料的形态、丰度、粒径和成分组成进行了测定,并使用污染负荷指数(PLI)和潜在污染风险指数(PRI)评估了研究区域微塑料污染状况和生态风险。结果表明,黄河三角洲湿地微塑料丰度为20~520 n·kg-1,中值为150
语文是小学基础教育的重要内容,而其中识字教学作为低年级语文教学的重头戏,在学生的未来成长发展过程中发挥着重要作用。就低年级的学生而言,掌握识字的技巧、方法,具备丰富的汉字储备了,理解汉字的含义,能够让后续学习生活道路更加平坦、顺畅。然而不可忽视的是,由于低年级的学生认知能力较弱等,识字教学存在一定的阻碍,难以达成预期的效果。随着课程改革的深入发展,识字教学也迎来了改革创新的新契机,教师于实际的教学
本文就乡镇园林绿化的作用进行了具体的介绍,分析了当前我国乡镇园林绿化设计及管理中存在的问题,提出了其有效的改进措施,希望能够为乡镇园林工作提供参考以及借鉴。
<正>习主席对依法治军、从严治军高度重视、思考深邃,围绕严格教育管理、保持正规秩序、确保安全稳定等作出一系列重要论述。随着军队改革重塑逐步走向深入,人武部系统教育管理面临很多新情况新问题,特别是如何有效“激发动力、增强活力、提升能力”成为当前建设发展的现实问题。调研中感到,与其他类型部队相比,人武部系统教育管理有着自身鲜明特点:一是人员类别成分“杂”。人员结构主要是干部为骨干,文职人员为主体,职工
期刊