【摘 要】
:
图像语义分割是指将图像中的每个像素分配到对应的类别,从而实现对图像中不同物体的识别和分割。图像语义分割在自动驾驶系统中具有重要作用,可以为车辆提供有效的环境感知信息,如障碍物、可行驶区域、交通标志等。然而,自动驾驶场景下的图像语义分割面临着准确率和实时性两大挑战:一方面,道路交通环境复杂多样,目标差异较大,视觉传感器易受光照条件干扰,在恶劣条件下成像质量低;另一方面,车辆行驶速度较快,环境感知信息
论文部分内容阅读
图像语义分割是指将图像中的每个像素分配到对应的类别,从而实现对图像中不同物体的识别和分割。图像语义分割在自动驾驶系统中具有重要作用,可以为车辆提供有效的环境感知信息,如障碍物、可行驶区域、交通标志等。然而,自动驾驶场景下的图像语义分割面临着准确率和实时性两大挑战:一方面,道路交通环境复杂多样,目标差异较大,视觉传感器易受光照条件干扰,在恶劣条件下成像质量低;另一方面,车辆行驶速度较快,环境感知信息巨大,图像分割速度难以达到实时性要求。针对这两大挑战,本文展开了面向自动驾驶场景的图像语义分割算法研究,具体工作如下:(1)改进了一种高准确率图像语义分割方案。该方案利用HRNet(High-Resolution Net)保持高分辨率特征,同时引入OCRNet(Object-Contextual Representations for Semantic Segmentation)增强对象级别的语义信息。为了进一步提升分割效果,本文还对该方法进行了三点改进:改进了上采样模块,根据网络模型通道间的重要性分配不同的权重,使上采样过程更有针对性;优化了网络结构,增加了浅层和深层特征之间的连接;改进了HRNet的卷积模块,使用残差ASPP(Atrous Spatial Pyramid Pooling)代替普通卷积来增强多尺度感知能力。实验结果表明,本方案在Cityscapes数据集和Camvid(Cambridge-driving Labeled Video Database)数据集上的平均交并比m Io U(mean Intersection over Union,m Io U)分别为81.20%和72.06%。(2)改进了一种实时图像语义分割方案。该方案以知识蒸馏和特征融合为基准,主要进行了以下四点工作:利用一个参数量多的大模型(教师网络)监督轻量化的小模型(学生网络)训练,使学生网络能够从教师网络中学习到有效的语义信息;改进了灵活解码器模块,使其网络通道数量与输入图像大小对应,避免计算冗余;改进了基于注意力机制的特征融合模块,优化特征交互与融合;优化了金字塔池化模块的结构,减少计算量和内存消耗。实验结果表明,本方案可以有效提升语义分割算法在Cityscapes数据集上的分割速度,提升了语义分割技术的实用性和应用范围。(3)设计了一个面向驾驶场景的语义分割系统。该系统基于语义分割技术实现对车辆场景中各种目标的像素级分类,提供了一个可视化界面来展示分割结果,并且还可以作为一个通用的研究平台,支持不同的语义分割算法进行对比和评估。该系统包含4个层次,分别是数据采集层、数据存储层、业务层和展示层。经过测试和验证后可以发现,该系统能够对驾驶场景的图像进行像素级的语义标注,支持多种语义分割模型的切换和性能比较,并且还能够对分割结果进行可视化展示。综上所述,本文针对自动驾驶语义分割技术中的准确率和实时性要求进行研究与实验,分别提出了高准确率图像语义分割方案和实时图像语义分割方案,提升了自动驾驶语义分割技术的总体性能。并且设计了一个驾驶场景语义分割系统,为自动驾驶的语义分割问题提供了一个可视化的分析平台。
其他文献
改革开放以来,农村经济社会发展和农民生活水平提升,农村生产生活方式以及思想观念发生巨大转变,农村的生活垃圾排放的数量和种类迅速增加。在农村生活垃圾来源多样、种类复杂和传统社会代谢循环生产方式逐渐破裂的冲突下,农村的生活废弃物逐渐垃圾化并最终演变成农村垃圾问题,由此而形成的污染严重威胁农户的生活环境和身体健康,也引起社会的广泛关注和中央政府的高度重视。破解农村垃圾治理问题,不仅要重视垃圾的末端处理,
光纤布拉格光栅(Fiber Bragg Grating,FBG)传感器作为最常见的一类波长调制型光纤传感器,具有抗电磁干扰、稳定性好、使用寿命长等优良性能,同时兼具多参量敏感性和波长可复用性,在航空航天、建筑结构健康监测及生物医学等领域具备极强的优势,得到了广泛的应用,FBG传感器的高速发展为光纤传感领域注入了新的活力。本文研究了FBG传感器的应变、温度传感特性,对FBG应变传递过程做了深入研究,
党的十九大报告首次提出,实施乡村振兴战略,促进农业农村现代化发展,至此国家将农业农村发展问题提升到新的战略高度。农民专业合作社作为我国新型农业经营主体的一种重要形式,能够巩固和完善以家庭联产承包责任制为基础、统分结合的双层经营制度,帮助农民增收致富,促进农业农村的现代化发展,推动乡村振兴战略的实施和国民经济社会的发展。自《中华人民共和国农民专业合作社法》(以下简称《农民专业合作社法》)于2007年
水稻作为全球重要的经济农作物在自然生长过程中难免会遭遇病虫害,其病虫害会直接影响农作物的品质和产量,给农民带来巨大的经济损失。传统的人工水稻病虫害识别非常依赖专业人士到稻田现场进行识别,该方法十分消耗人力、物力,并且主观性强,不利于水稻病虫害防治。因此将计算机技术与病虫害识别结合,克服传统人工识别方式的弊端,具有非常重要的研究意义。卷积神经网络是一种重要的深度神经网络,它能使用端到端的方式将原始图
随着新课改的实施,教师的教育观念发生了转变,以发展学生数学学科核心素养为导向,教育整体是往好的方向发展。如何突出高中数学课程内容主线、优化课程结构并改进教学受到广泛的关注。高中函数是高中数学内容的一条主线,贯穿高中数学学习的整个过程,在高中数学中占据十分重要的地位。但函数概念的学习是相对抽象的,多数高中生对函数概念的理解是处于浅层的,未能真正对函数知识进行掌握和应用,学习效果一般。因此,如何将深度
农业无人车作为智能化农业装备,其控制系统由上层规划系统和底层的控制系统组成,其中上层的规划系统主要负责信息的收集、处理和运动指令的发送,底层的控制系统则直接对农业无人车的运动状态进行控制。本文针对农业无人车制动系统展开研究,首先在方案的选择上提出了一种制动力响应快、调控精确高的直驱线控制动方案,用直线电机提供制动力,通过调整其推力的大小来精确调节车辆制动力。通过建立直线电机的数学模型和对直线电机动
本文考虑分数阶多孔介质方程柯西问题(?)解的复杂渐近行为,其中▽α-1代表▽(-Δ)α/2-1,α∈(0,2).分数阶多孔介质方程是一类非局部算子与多孔介质相结合的分数阶微分方程,能够很好地解释一些具有遗传性、记忆性的特殊材料呈现的自然现象与变化规律,在数学、物理等领域有许多应用.然而,现有领域关于分数阶多孔介质方程的研究主要围绕解的存在唯一性、正则性和简单渐近行为等基本性质展开,在解的复杂渐近行
随着经济的快速发展和能源开发消耗的加深,空气污染问题越来越严重。氮氧化物(NOx)是主要的大气污染物之一,其中NO和NO2是NOx的主要成分。NO排放到大气中时,会进一步氧化形成化学性质相对稳定的NO2,这是形成光化学烟雾和酸雨的重要原因之一。同时,NOx还可以通过呼吸进入人体肺部深层,导致支气管炎或肺气肿等疾病,严重威胁人体健康。因此,去除排放尾气中的NOx具有重要意义。国内外对于去除NOx常采
随着我国脱贫攻坚取得圆满成功,农村地区交通建设和网络通信得到改善,电子商务在我国农村发展如火如荼。电子商务进农村,解决的不仅是农民的消费需求问题,还带给农民一条增收的重要渠道。农村电子商务发展到今天,越来越多的农民从电商生产者发展为网店经营者。目前的农村电商知识服务尚处于服务知识内容零散、服务缺乏连续性、所提供服务内容与需求不完全匹配的发展初期,更多的服务性问题亟待解决。本文以新公共服务理论和多元