基于高光辅助和域适应的夜间车辆检测

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:asfaweawrv
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
夜间车辆检测需要我们根据夜间场景图像预测车辆的类别以及位置。该任务在自动驾驶系统(ADS)和辅助驾驶系统(DAS)中扮演不可或缺的角色。然而,夜间车辆检测有以下几个难点:(1)由于夜间光照较低,车辆的视觉特征难以识别,这给基于视觉的方法带来了很大的挑战。(2)夜间场景中车辆具有较大的类内差异,譬如对向行驶的车的头灯为白色,而同方向行驶的车的尾灯为红色,这会加大特征表达的难度。(3)相比于白天车辆数据,夜间车辆的数据比较匮乏;但是白天场景和夜间场景的视觉特征差异很大,利用白天场景训练的模型无法直接应用于夜间场景。车灯和其相应的车身反光,本文统称为车辆高光,是夜间场景中值得信赖的视觉特征。因此,有效地利用车辆高光信息可以在性能上得到较大的改进。针对有充分标记训练数据的夜间车辆检测任务,本文提出了一种基于车辆高光信息的夜间车辆检测框架。首先,本文生成了一个高细粒度的车辆高光检测器,并创建了车辆标签层级结构,以扩大类间差异和减少类内差异。然后,本文提出了一种多尺度高光特征和车辆视觉特征的融合机制,以及一种端到端的高光融合网络。由于采用了独特的车辆高光融合机制,本文所提出的方法的性能优于目前最先进的方法。同时,本文的方法迁移到不同的主流检测网络后都有较大帮助,说明本文的方法的泛化性很强。另外,在无监督域适应的夜间场景任务中,本文引进循环生成对抗的思想来拉近源域和目标域的距离。本文提出的方法超越现有最先进的目标检测的域适应方法。本文的主要贡献有以下几点:1、本文提出了两种新的融合网络,这两种网络通过学习来自动平衡车辆高光和车辆自身不同层次的视觉特征的重要性,从而适应大多数情况,甚至可以容忍车辆高光检测的误差。另外,本文发现除了车灯,车身反光也可以提供丰富的车辆位置提示信息,因此额外考虑车身反光可以大幅提升夜间车辆检测的精确度。2、本文提出一个基于伪标签迭代训练的神经网络,为车辆以及车辆高光划分子类。子类标签和原类别标签共同构成标签层级。本文基于标签层级的训练机制可以解决类内差异大的问题。3、本文提出一个针对夜间车辆检测的域适应框架。本文把生成对抗思想引入到域适应中,从图像层次和目标层次拉近源域和目标域的距离。提出的方法超越现有最先进的目标检测的域适应方法。
其他文献
我国铝电解产业已形成全球最大的生产和消费规模。目前,我国电解铝产能过剩,企业亏损,作为高能耗工业,降低电力资源的成本是市场竞争的关键。东北大学直流负载半实物仿真及负
用改进的蔗糖密度梯度超速离心法从大鼠脑匀浆物中制备出突触质膜,其中不含胞液成份,用放射配体结合法,以[ ̄3H]皮质酮作为标记配体测得突触质膜上有皮质酮特异结合部位,其结合的饱和曲
越来越多的人在互联网平台发布一些产品的评论信息,我们称为用户生成内容(User-Generated Content,UGC)。如何高效地帮助人们识别有用的信息是目前学术界和工业界越来越关注的研究之一。汉语解释性意见要素识别就是研究如何精确的识别出用户生成内容中要素成分的问题。汉语解释性意见要素识别任务是指利用自然语言处理技术准确的识别评论语句中的意见属性、意见评论、意见解释信息。本文根据中文产品领
简述了生态水利管理的内涵,将人工免疫系统的管理应用到水利领域,并对生态水利管理方法及其应用进行了初步探索,主要包括生态水利管理网络模型、生态水利安全预警系统及其指
阴离子交换膜(AEM)是电渗析装置的核心组件,其性能与装置的电渗析表现密切相关。本论文为解决电渗析专用AEM结构设计基础理论偏弱问题,研究了AEM离子基团分布位置、AEM主链的精
随着语文教育中学生的人文素养提升的日益关注,语文教学越来越要求注重以学生为本,通过学生个体价值的挖掘发挥语文教学的作用,已经变成了当前初中语文教学的一种趋势,这也是
近年来,随着我国经济持续的发展、国际地位的提升以及“一带一路”倡议的提出,人民币得到世界各国(地区)的广泛关注,人民币国际化由此得到契机。为进一步推进人民币国际化,以及满足人民币存量大幅增加所带来的境内外投资需求,离岸人民币市场的建设显得至关重要。离岸人民币市场能够促进境外资金储备池的形成,为境外资本提供融通渠道,还能发挥市场的价格发现功能。但离岸人民币市场的快速发展带来了大量跨境资本流动,而境内
对119例肺心病患者及对照组进行了心浆血浆心钠素(ANF)、钠、钾、氧分压(PO2)、二氧化碳分压(PCO2)测定分析,结果显示,肺心病心功能失代偿组、代偿组血浆ANF均较正常对照组显著升高(P<0.01),三组血清钠,钾测定无
1941年美英共同发布的《大西洋宪章》规定,不同意法西斯国家侵略扩张而引起的领土变更,也不同意反法西斯盟国追求新的领土。这被同盟国所认可,称为"领土不扩大"原则,是战后处理