基于跨模态数据融合的道路车辆检测算法研究

来源 :重庆理工大学 | 被引量 : 0次 | 上传用户:zeone
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着自动驾驶技术的不断发展,智能汽车的应用场景越来越广泛,凸显出广阔的发展前景,但随之而来的安全隐患也亟待解决。对于智能汽车而言,环境感知系统是实现安全自动驾驶的关键,行驶车辆检测是感知系统最重要的功能之一。现阶段单一模态的传感器数据在车辆检测任务中的应用局限性较强,例如点云由于其不规则性处理时容易丢失局部信息,二维图像缺乏空间深度表达能力。因此,本文针对上述问题提出了一种基于点云与图像跨模态数据融合的车辆检测方法,深入探讨了两种数据的特征提取与融合,本文的主要工作如下:(1)针对原始点云数据因其无序性导致局部特征丢失而难以直接进行特征提取和目标检测的问题,提出了一种多级特征提取的点云分割方法。该方法在Point Net网络的基础上进行了如下改进和优化:引入多层局部采样,通过在点云的局部区域进行叠代采样并重复多次使用Point Net进行操作,为点云分割和后续的检测任务提供精确的特征提取性能;引入抽象特征向量对采样点的选取进行约束,使得提取的特征更加精准,并且具有更高级的语义信息。实验表明,使用改进后的网络能够有效提升算法的点云分割能力。(2)针对目前已有的检测方法在实际应用中容易受到其他目标与背景干扰的问题,提出了一种基于视锥候选区域的跨模态数据融合车辆检测方法。该方法首先使用基于区域候选网络的二维检测算法Faster-RCNN对图像进行特征提取,快速生成二维候选区域,接着利用点云的深度信息将二维候选区域提升为三维空间中的视锥候选区域,然后使用(1)中提出的多级特征提取分割方法对点云进行特征提取,实现在三维空间中对目标车辆点云的精确实例分割,最后设计了一种基于锚点框偏移的特征级融合方案将图像与点云数据进行融合,再通过回归与坐标系变换实现对车辆的三维边界框估计。(3)针对提出的跨模态数据融合车辆检测算法,在KITTI数据集上进行验证,并与其他优秀的检测算法进行对比。实验表明,本文算法在KITTI验证集的车辆类别上,总体平均精度和简单、中等难度的3D AP获得了state-of-the-art的结果,分别比次高的算法提升了1.02%、1.66%和1.63%。在车辆类别的三维定位性能对比中,算法也有较好的表现。综上所述,本文算法不仅对于车辆的检测具有一定的优越性,对于车辆的定位也具有较强的鲁棒性。
其他文献
随着时代的发展,越来越多的移动机器人被用于仓储物流运输和服务型行业中,因此机器人往往需要在高度动态的环境中进行可靠的定位和控制。一方面,基于相机这类接收环境信息的传感器的定位算法受到环境中动态物体的影响较大,而使用多传感器紧耦合的融合方法对初始化场景的静态性要求较高,常规的松耦合的融合方法又无法有效的消除动态物体对定位的影响;另一方面ROS作为应用最为广泛的机器人开发平台,其实时性较差,已无法满足
学位
伴随着中国经济发展和世界影响力提升,推动社会科学的繁荣发展,形成具有中国风格的话语体系,构建具有中国主体性的世界叙事,显得重要而紧迫。金观涛认为,传统社会是由不同轴心文明组成,每个文明用各自的核心价值观来想象普世社会,现代社会与其不同,国际法和民族国家构成了全球秩序的核心要素。所以,中国国际法观念深刻反映了作为国际社会主体的中国与全球秩序之间的互构,其观念变迁则折射出百余年来中国对现代化文明认识的
学位
旋转机械是工业生产、生活中不可或缺的一部分,如风力发电机械的扇叶装置,工业机械中的齿轮传动装置,传动链等转动机械。速度与位移等运动参量是可以体现运动系统工作状态、运动特性及性能的重要参数。通过测量速度与位移可提取故障信息用于系统的故障检测,提高机械运动的准确性。旋转机械通常与其他机械共同协同工作,因此在测量时,应减少安装额外测量器械来减少对其正常工作的影响。目前常见的位移传感方式普遍存在需要对被测
学位
生物传感器因结构设计简单、普适性高、精确可靠以及能在低浓度下对生物参量实现快速灵敏的检测等性能优势,已广泛应用于疾病的诊断与控制、对环境变化状况的监测与预测、药物的研制与改进及食品安全等方面。光纤Bragg光栅(FBG)作为无源光学器件的最典型代表,具有灵敏度高、结构简单、绝对测量、不受电磁干扰、体积小以及在临床应用中具有多路复用等优点,因此在生物医学检测领域具有应用潜力和科研实用价值。由于FBG
学位
与X射线医学成像技术相比,以普通光波为信息载体的光层析成像技术是利用生物组织的吸收、散射、反射等改变光波振幅、相位和偏振等效应,获取生物组织内部信息,具有安全无损、高灵敏度、高分辨率的优点。从光信号中提取生物组织信息是光层析成像的关键。光相干层析成像技术利用低相干干涉准确获取介质中的光变化信息,现已广泛应用于临床诊断与材料检测领域。轴向分辨率是衡量光相干层析成像系统性能的重要指标,主要由光源谱宽来
学位
随着工业领域对生产中各个环节智能化程度要求的提高,越来越多的具有自主感知和决策能力的工业机器人被应用到生产线的各个环节,对其研究具有重要意义。本研究主要解决轴承圈在热处理环节中呈散乱堆叠状态的上料抓取问题,特别是针对复杂堆叠状态轴承圈的识别定位与抓取任务中可被抓取轴承圈确认困难、轴承圈弱纹理表面难以匹配、轴承圈金属表面易过曝光等问题,开展了基于YOLOv5与双目线激光的轴承圈识别定位与抓取研究。整
学位
作为挤压铸造设备的关键机构,压射机构的可靠运行将直接影响设备的服役性能和产品质量。在压射机构运行过程中,不断承受周期性变化的热-机械载荷作用,由此造成压室和冲头的配合间隙不断发生变化,配合间隙过大或过小都会影响其正常运行,同时对其运行寿命也会产生不利影响。本文通过利用多可信度Co-Kriging模型来实现实验和模拟数据的整合,以改进目前仅借助数值模拟开展的相关研究,进一步提升对压射机构动态配合分析
学位
聚合物因具有质轻、抗腐蚀等优点而被广泛应用于国民经济各个领域,但较低的本征热导率限制了其在热管理材料领域的推广应用。添加具有大比表面积的二维层状填料可以显著提高聚合物导热性,但较强的层间结合力和原子级厚度使得层状材料在加工过程中难以被高效剥离与均匀分散。本文通过研制动态拉伸熔融混合设备,并在相变协同作用下实现二维层状填料的原位剥离和同步分散,高效制备出高性能导热复合材料。基于混合腔室体积周期性变化
学位
随着智慧生活的发展,人们对室内的定位需求也急剧提升,如超市的智能购物车定位商品,地下停车场寻车定位、大型商场人群定位等。可见光室内定位(Visible Light Positions,VLP)技术由于其高精度、低成本、无电磁干扰等众多优点,而逐渐成为近些年研究者们关注的焦点。针对现有的可见光室内定位技术普遍都存在着定位精度低、稳定性较差等问题。本文提出了一种基于LED编码阵列的数据传输和空间三点定
学位
钍资源调查评价及重点成矿带成矿潜力预测,是国内首次系统进行的钍资源综合调查和预测工作。主要开展了钍资源信息搜集及资料二次开发,重点地区钍矿地质调查,典型矿床研究以及钍成矿潜力评价,建立了全国钍资源数据库、划分了19个钍成矿区带及5种钍矿成因类型、总结了我国钍及其共(伴)生矿产的矿化特征、控矿因素和成矿规律,厘定了各类钍矿床的矿物学及地球化学指标,剖析了不同类型钍矿床的成矿要素和预测要素,建立了典型
期刊