基于深度学习的3D车道线检测方法研究

来源 :天津职业技术师范大学 | 被引量 : 0次 | 上传用户:liuchunxi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
采用传统方式对车道线的三维空间位置进行检测时,需基于平地面假设,将图像中车道线的2D平面位置检测结果通过标定好的相机内外参数映射到平地面中以得到车道线的空间位置坐标。因不能时时保证地面是平坦的,导致采用此方式可能得到错误的车道线位置检测结果。为解决该问题,受3D-Lane Net、Gen-Lane Net工作启发,本文提出了一种基于深度学习的3D车道线检测算法,并在嵌入式平台上对该算法进行了部署。算法包含车道线分割、鸟瞰图生成及空间位置检测三个阶段,并将车载前视摄相机拍摄的车道线图像及拍摄图像时对应的相机内外参数作为算法输入,直接从图像中推理得到车道线的空间位置坐标。主要研究内容如下:1)基于图像二值语义分割的车道线检测模型。模型基于编码-特征聚合增强-解码结构,采用RESNet34作为编码部分对特征图下采样中的特征信息进行提取,采用一种循环特征聚合增强模块插入到编-解码结构之间,在特征图的局部范围与全局范围内对车道线语义信息进行全面提取,为得到精细的车道线分割结果,设计了一种基于转置卷积-插值上采样的双路径特征图上采样结构作为解码部分对特征图尺寸进行复原。模型在Apollo 3D Synthetic数据集上的MIo U取得了96.83%,在Open Lane数据集上的MIo U取得了66.97%。2)基于逆透视变换的鸟瞰图生成模型。基于相机及图像几何变换技术构建了一种逆透视变换模型,将前视图像视角下的车道线分割图映射到鸟瞰图下进行表示,为基于鸟瞰图下的车道线分割图进行3D车道线检测模型的设计提供了技术基础。3)基于鸟瞰图的车道线三维空间位置检测模型。模型基于编码-位置回归结构,采用残差连接机制构建了一种特征图下采样及特征信息提取模块作为编码部分对特征图语义信息进行充分挖掘,位置回归部分采用分组卷积加通道注意力机制模块进行构建以提高模型对车道线特征图中抽象信息的解析能力。同时构建一种车道线Anchor,用于模型对真实车道线与Anchor位置间的偏置进行推测以间接实现车道线空间位置的检测,并降低推测的难度及提高检测的准确度。模型在Apollo 3D Synthetic数据集上的F-measure达到了0.892,在Open Lane数据集上的F-measure达到了0.504,同时具备较低的位置检测误差。4)基于Jetson AGX Xavier平台的车道线检测算法移植。从工程化的角度对硬件平台的系统软件及深度学习环境进行了安装与配置,将本文提出的3D车道线检测算法在该平台上进行了部署并取得了较好的移植效果。
其他文献
甘薯[Ipomoea batatas(L.)Lam.]是世界上重要的农作物之一,也是我国第四大农作物,是具有较大潜力的生物能源植物。由于甘薯是一种六倍体植物,其基因组较为复杂,到目前为止其完整基因组的测序尚未成功。相对于其他重要农作物,甘薯众多性状发育的分子调控机制尚不明确。MADS-box基因家族是目前研究十分深入的一类调控植物生长发育的转录因子,广泛分布在动植物和真菌中。MADS-box转录因
学位
中国人口老龄化发展迅速,截至2020年10月底,我国60岁及以上老年人口数量达到2.64亿,占总人口比重的18.7%,预计到2050年,中国60岁及以上老年人口将接近5亿。中国作为一个农业大国,农村老年人口占有很大的比重。然而,与发达国家不同的是,中国进入老龄化社会时的经济发展水平相对落后,存在“未富先老”的特征,这一特征在农村则更为突出。青壮年劳动力的大规模外流使得农村传统家庭养老功能式微,农村
学位
随着中国经济的发展,中国的集团多元化公司将越来越多,同时随着中国市场开放力度的不断加大,许多企业受到了前所未有的冲击。在面临着严峻的竞争和挑战的时候,大部分管理者没有真正意识到人才是企业竞争的关键要素,人力资源是企业实现竞争优势的决定性因素之一。招聘是人力资源管理中非常重要的环节,招聘的质量直接影响到企业的效率、效益,并直接影响到企业的竞争力,要想真正发挥招聘管理工作对企业发展的推动作用,就需要有
学位
酸枣仁(Ziziphi Spinosae Semen)为鼠李科植物酸枣Ziziphus jujuba Mill.var.spinose(Bunge)Huex H.F.Chou的干燥成熟种子,具有养心补肝、宁心安神、敛汗的功效。近年来,随着人们生活节奏的加快,失眠发生率明显增加,临床对酸枣仁的需求量也随之增加,故其质量的优劣备受关注。目前有部分产区出现了酸枣仁不饱满、质量不合格情况,除了酸枣种质欠佳
学位
当前,关于大蒜内生菌的研究报道少见。由于大蒜具有很强的杀菌抑菌作用,因此大蒜内生菌也可能具有与其宿主植物相同的生物学作用。因此,研究大蒜拮抗菌株对植物病原真菌的抑制作用,将其开发成天然、高效、环保的生物农药,具有重要的应用潜力。本研究以采集自全国不同地区的20种大蒜鳞茎为样品,从中共分离得到208株大蒜内生菌。根据菌落颜色、形状等特征去除相同菌株,对剩余的大蒜内生菌进行16S r DNA和ITS-
学位
液泡加工酶(Vacuolar Processing Enzyme,VPE)是一种存在于植物液泡中的半胱氨酸蛋白酶,不仅具有水解蛋白的功能,而且与动物Caspase-1功能相似,能促进植物细胞程序性死亡(programmed cell death,PCD)。近年来的研究表明,在植物发育及胁迫响应过程中,VPE具有介导植物细胞PCD,促进植物发育时期转换及响应胁迫的重要功能。此外,VPE还具有类似转录
学位
microRNAs(miRNAs或miRs)是一类长约22nt~25nt且在物种间及进化中保守性较高的一类内源性的单链非编码RNA,根据前期研究者们的研究证实它是哺乳动物骨骼肌发育过程中的关键调控因子,同时microRNAs也是目前生命科学领域研究的最为普遍和深入的一类非编码RNA。本研究依据本实验室前期秦川牛骨骼肌microRNAs转录组测序的结果,对筛选出的microRNA依据时空差异表达显著
学位
茄子(Solanum melongena L.)茄科,茄属植物。起源于东南亚热带地区,一般认为我国为第二起源地区,据FAO统计数据表明,2019年全球茄子种植面积约为184.8万hm~2,产量为5519.8万t左右,其中,我国种植面积为78.3万hm~2,产量3559万t,占全球茄子总产量的64.48%。茄子为喜温作物,适应性强、采收期长、产量高,是我国夏秋季主要蔬菜种类之一,尤其在平衡夏秋蔬菜淡
学位
休闲农业是基于农业生产的功能性、农村生态的丰富性以及农民生活的完整性的“三农三生”一体化新型产业形态;同时休闲农业具备农业的多功能性,并以全方位体验农业生命周期为途径,是满足城市居民感念乡土、感悟乡愁、感受乡村的一种新型旅游消费形态。随着乡村振兴战略的全面推进,休闲农业已然成为我国实现农村高质量发展的重要途径之一,但当前休闲农业旅游景区普遍存在主题不晰、特色不明、功能不全等问题,从而导致游客体验不
学位
随着智能交通的不断发展以及每年因为发生车祸而造成死亡人数的逐年增加,促使车辆不断地向着智能化的方向发展。轨迹跟踪是车辆自动驾驶技术研究的重要环节,同时也是研究智能车辆重要的模块。因此,研究车辆的轨迹跟踪控制环节对于车辆实现“智能化”具有重要的实际意义。目前对于智能车辆轨迹跟踪问题的研究在逐步的深入,同时也面临着更多的挑战,基于水平道路上的轨迹跟踪问题研究已经比较成熟,但是针对横向坡道及变曲率路况下
学位