基于深度学习的交通场景多目标检测与分割研究

来源 :桂林电子科技大学 | 被引量 : 0次 | 上传用户:sw_8818
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
无人驾驶是保障交通安全与提升舒适驾驶的重要技术,交通场景多目标检测与分割技术在无人驾驶场景理解中起着关键作用。交通场景中随时出现的行人、车辆、交通标志以及交通灯,受到遮挡、光照不均匀以及恶劣天气等因素的影响,加剧检测与分割难度。针对多目标检测与分割准确性、鲁棒性与实时性的需求,本文应用计算机视觉与深度学习,研究交通场景多目标检测与分割改进算法,在此基础上完成了一款可搭载移动端的检测与分割智能系统。主要研究工作内容如下:概述交通场景多目标涉及的类别,介绍训练改进网络采用的经典数据集。探讨并分析目标检测、图像分割常用的经典方法与基于深度学习的方法,提炼出如何开展多目标检测与分割工作方案。剖析了算法部署的Caffe、Tensor Flow深度学习框架及其运行机制。为了解决交通场景多目标检测方法效果差、检测速度慢等问题,设计一种改进的Faster R-CNN算法。通过改进Ro I网络层结构,实现交通场景小目标特征信息在网络高低层间的完整传递,解决小目标检测精度较低的问题。采用双线性内插算法替代两次量化算法,使得网络内部的特征聚集变得连续,有效提升算法的运算能力且降低算法时间损耗。以国内外主流开源数据集与自制数据集作为总数据集,保证改进网络能够有效学习目标特征。调整超参数得到的多目标检测改进网络在后续开源数据集测试实验中展示了良好的快速性与鲁棒性。针对交通场景多目标分割精度低、鲁棒性差等问题,设计一种改进的Mask RCNN交通场景多目标快速分割方法。采用轻量级Mobile Net作为主干网络,减少内部参数并有效降低模型体积,提升移动端的算法移植能力。优化FPN网络与主干网络的卷积计算方式,使得目标特征信息在金字塔内有效运用,确保小目标精确分割。替换归一化函数并调整超参数获得改进交通场景多目标分割模型。实验验证中,改进网络在伯克利BDD-100K、百度Apollo Scape、自动驾驶Nu Scenes数据集等国际认可数据集上取得较好效果,平均检测精度可达88.2%,单张图像检测速度可达0.402秒,适应多种复杂交通场景完成多目标的快速分割。基于交通场景移动端多目标检测与图像分割的实际需求,设计一种多目标检测与分割智能系统实现方案。设计了系统的硬件移动平台与软件工作模块,并介绍了系统的工作流程以及不同运行模式。在开展的多组智能系统评估实验中,系统在保证实时性前提下,以较高准确率完成多目标检测与分割,为智能驾驶以及无人驾驶领域中的交通场景多目标检测与分割问题打下了理论算法与实际应用的基础。
其他文献
学位
空间调制全偏振成像系统可同时获取全偏振分量信息,并从中得到多元的互补信息。空间调制全偏振成像系统采用静态的调制结构,能够实现对运动目标进行偏振成像探测,故它属于同时偏振成像方法中的一种。本文介绍了空间调制全偏振成像技术在国内外相关领域的研究进展,并详细地阐述了空间调制全偏振成像信息处理技术的发展现状。根据空间调制全偏振成像系统的结构特点,研究有效光谱带宽对干涉数据解调精度的影响。同时依据干涉图和差
研究表明,人类获取外界信息约80%是通过视觉获得的,双目视觉是模拟人眼视觉系统来获得现实世界信息的系统,是计算机视觉技术的一个重要分支,经过多年来的发展,在机器人视觉、反求工程、工业检测和医学成像等领域中的应用越来越广泛。立体匹配是双目视觉的一个重要环节,立体匹配的结果直接影响三维重建的效果,但是由于立体匹配过程会受到各种因素的影响,比如光照、物体遮挡和弱纹理等,会导致视差图的精度不高,如何提高视
学位
一些卫星载体的位置和形态相对于地球在不断发生着变化,多变的运动状态将影响其与地面天线的通信质量,而具有波束扫描能力的天线可以很好的解决这一问题。本文将液晶材料作为全息天线的介质,利用其电调谐能力实现波束扫描,并通过在天线顶部加载超表面来实现高增益。具体研究内容如下:1.基于液晶波束扫描的全息天线研究。研究了液晶介质的可调谐原理,通过控制液晶的偏压可实现其介电常数的变化,将液晶作为天线的介质基底即可
计算机视觉技术的进步以及激光雷达、消费级RGB-D相机、双目相机的出现,促使三维重建技术在医疗卫生、机器人技术、电力巡检、虚拟现实、犯罪现场还原、建筑基坑施工等方面有着广泛应用。传统对单个物体的重建技术已日趋成熟,三维重建技术正朝大规模、大动态的场景重建方向发展。然而,以手持三维重建设备重建小规模场景的方式不适用于大规模、大动态、存在危险的场景。四旋翼无人机具有机动性强、灵活性大等优点,非常适合替
偏振是太赫兹波的一个重要特征,传统的太赫兹波偏振转换器件尺寸较大且色散严重。超表面,是一种人工构造的超薄二维阵列平面,有利于太赫兹系统的微型化和集成化。因此,利用超表面调控太赫兹波偏振,能够有效克服传统偏振调控器件的缺陷。本文以太赫兹波偏振调控为目标,通过二氧化钒和石墨烯构建可重构超表面,实现太赫兹波偏振的动态调控。本文研究工作分为以下三个部分:1.研究了超表面实现太赫兹波偏振调控的基本理论,以及
近些年来,通信系统正逐渐朝着高速率、高可靠性和大数据传输容量等方向发展。本文依托此发展趋势和无线通信系统发展的要求,对印刷天线的宽频带/双频带技术进行研究,主要分为以下三个方面:(1)正六边形超宽带小型化印刷天线研究。该研究主要通过改变单极子印刷天线正面的正六边形辐射贴片形状与背面的地板结构来实现宽带化。最终优化的天线工作频段为3.13~29.33 GHz,带宽为26.2 GHz(161.4%),
LiAlH4虽具有较高的理论含氢量(10.6 wt%),但存在放氢温度过高、放氢速率缓慢和可逆吸氢性能差等缺点,限制其作为储氢材料的实际应用。本文通过制备Ni/C、TiO2@C、NiTiO3三种掺杂剂,并系统研究了它们对LiAlH4放氢性能的影响,主要结论如下:(1)在室温下,采用自组装反应得到了含Ni的络合物,进一步结合高温热解制备得到了棒状Ni/C材料,通过机械球磨方式将Ni/C掺杂到LiAl
随着5G的部署、物联网的广泛应用以及其他高移动应用的日益发展,对多普勒环境下的高可靠、高容量通信提出了更高的要求。将非相干抗时、频色散波形拓展到空间抗色散波形可以有效的满足高移动场景下的通信需求,但目前缺乏明确的思路和方法。针对非相干抗双色散波形的空分拓展,将非相干MIMO空分复用模型与抗双色散衰落的波形相结合,设计了一个时-频-空调制信号体制,在高速移动环境下可以获得在时、频、空域上的联合复用,