基于双目视觉的三维目标检测与跟踪算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:liyang12886
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
智能驾驶环境感知系统通过对相机、毫米波雷达及激光雷达等传感器获取的环境信息进行处理,得到周边物体与车辆的相对位置关系,为车辆路径规划、决策和控制提供重要依据。然而,在复杂多变的道路交通环境,激光雷达获取的点云数据缺乏稳定性,而相机获取的图像数据缺乏立体信息,使得三维目标检测一直难以取得理想的效果。研究准确且稳定的三维目标检测及跟踪算法实现对复杂环境中目标的精确定位具有重要意义。论文以道路交通环境下的车辆为研究对象,针对空间目标定位精度低的问题,通过改进二维目标检测网络Faster R-CNN,结合双目视觉,建立了一种三维目标检测网络;为减少误检与漏检现象的发生,将其与Kalman滤波相结合,提出了多目标在线跟踪算法,实现对车辆的精确识别与跟踪定位。论文主要工作如下:(1)搭建双目视觉系统。利用相机成像原理和双目视觉测距原理,选择合适的软硬件平台与双目相机,搭建双目视觉系统。采用张氏标定法对双目相机进行标定,确定相机内、外参数矩阵和畸变系数,并且根据标定结果对左右图像进行畸变矫正与水平校正。(2)建立中心点网络(Central Point Networks,CPNet)用于三维目标检测。根据空间车辆检测场景改进Faster R-CNN网络结构,针对远距离车辆检测难题,建立了一种基于多尺度输出的特征提取网络;针对空间车辆定位精度低的问题,构建了投影中心点回归分支,并提出了一种基于光度校正的三维目标框修正算法优化检测结果。最后,在KITTI数据集上训练和测试CPNet检测性能,并设置静态、动态车辆检测实验验证了CPNet在实际道路交通环境下的有效性与鲁棒性。(3)提出CPNet与Kalman滤波结合的多目标跟踪算法。将CPNet与Kalman滤波算法相结合,利用Kalman滤波的抗扰动特性来解决CPNet出现的误检与漏检问题,并通过优化跟踪策略与相似度指标,提升跟踪算法效率。分别在KITTI跟踪数据集和本地图像数据集上测试跟踪算法性能,试验结果表明跟踪算法能有效降低误检率与漏检率,且跟踪部分耗时占算法整体比例较小。
其他文献
喻化思维是一种思维的特殊方式。修辞学中的许多语言现象都蕴涵着喻化思维的过程。本文结合认知理论从隐喻思维、类喻思维、博喻思维三个方面加以论述。
本文从课堂与课外两个方面论证并主张提升两课教学效果的主要举措:引进网络技术,改革教学实践,增强两课的实践特征.
以川滇地震次声波监测网络的西昌、攀枝花、丽江等台站,监测到了2014年10月至2014年12月在西昌卫星发射中心进行的多次公开火箭发射过程中的次声波信号,通过对信号波形、时频
本文通过在在澳大利亚近两个月的研修,对比分析了中国和澳大利亚教师对教材的研读和处理方法,对于提高中国教育教学的质量具有重要的理论和实践意义。通过对比借鉴,我国教师教学应该结合现有实际情况,深入研究,立体设计,系统规划,发挥学校,家庭,社会的三位一体的综合效力,使平面的知识变成立体的知识,将孩子身边的世界变成孩子生动的教材,开发学生智力,培养能力,以战略的眼光提高中小学生的整体素质。
随着经济的发展和社会的进步,人们的思维方式、价值观念和审美能力都发生了巨大的变化,电脑美术的出现为传统的版画创作带来了空前的挑战。同时,新技术的出现也为版画的创作,
本文采用低碘饲料建立的大鼠碘缺乏模型.对其15日龄子鼠大脑细胞核 RNA 聚合酶(简称 Rpase)相对含量与比活性进行了观察。结果显示:其 Rpase 相对含量降低(P<0.02),而 Rpase
针对多个运动的慢起伏目标情况,研究了发射分集多入多出(multiple input multiple output,MIMO)雷达的相参信号处理方法。提出了一种重复利用回波数据的目标参数估计算法。发射