低照度场景的彩色可视化及目标识别研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:caonima_0720
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
地面无人平台在环境感知任务中主要使用的传感器包括激光雷达与可见光相机。然而激光雷达获取物体的表观信息有限,呈现给操作人员不够直观;可见光相机能够获取丰富的颜色纹理信息,但在低照度环境下无法采集到清晰的图像。近年来出现的星光相机能够在极低照度(10-4Lux)条件下利用非可见光波段成像。但由于非可见光波段图片不利于人脑理解,会对操作员远程监控产生影响。当前目标检测任务主要基于彩色可见光图像,星光图像由于不具备颜色信息使得目标检测结果受限。为方便操作员远程监控以及提高地面无人平台目标识别能力,本文首先研究了点云和图像的数据同步方法,而后获得点云信息引导的星光-可见光图像对以及星光图像-点云联合数据,以此为基础研究了低照度环境下星光图像彩色可视化及目标检测,论文的主要创新点和成果如下:1.设计实现了一种硬件同步与软件补偿的激光雷达-相机数据同步系统,具体包括:激光雷达锁相与传感器异步触发实现的时间同步方法,车体自运动补偿消除自身运动误差以及相机内外参数标定实现的空间同步方法。经过上述方法可以将激光雷达与相机数据在时序上保持一致,并且通过内外参数标定方案设计提高了点云到图像的标定精度。该方案确保了异质传感器数据的时空一致性,为点云与图像数据融合奠定了基础。2.提出了一种基于生成对抗网络融合图像对生成的星光图像彩色可视化方法,克服了传统彩色可视化问题中数据难以获取的问题。该方法首先借助激光雷达点云和GPS/IMU数据获得了在白天和夜晚对应邻近位姿的点云投影图像,在设计的L1损失与对抗损失结合的生成对抗网络中,利用多帧累积与滤波后得到星光-可见光图像对作为配对数据,将白天场景的可见光图像数据作为未配对数据,得到星光图像彩色可视化结果。实验效果表明通过该方法能够获得良好可信的星光图像彩色可视化结果。3.提出了一种融合激光雷达点云和星光图像的目标检测方法。该方法利用Delaunay三角剖分算法对点云在图像上的稀疏投影进行上采样处理,将深度和反射率信息与星光图像进行深层次特征融合,针对被测目标的特点,采用聚类方法预设检测结果尺寸,并通过多尺度目标检测网络得到了星光图像目标检测结果。实验表明,该方法在低照度下环境下对行人和车辆等目标检测效果良好。本文通过对相关课题进行深入研究,在设计实现激光雷达与可见光相机传感器数据同步方法的基础上,提出了一种基于生成对抗网络的融合图像对生成的星光图像彩色可视化方法,并设计了融合点云深度与反射率信息的星光图像目标识别网络,为地面无人平台低照度环境感知工作提供了可行方案。
其他文献
三叉神经痛是以单侧面部三叉神经分布区内阵发性剧烈疼痛为特征的神经病理性疼痛,疾病易反复发作,属难治性顽疾,病程日久常伴发焦虑、抑郁等不良情绪。孙建华教授在多年临床经验及现代医学研究的基础上,提出此病发生以肝脑同病为本,风火瘀为标,采用“肝脑同源”理论分期论治,疗效显著。
期刊
梅尼埃病(Ménière’s disease, MD)问世已有160年,关于MD的诊断标准和治疗方案随着临床实践的进展不断发生着变化。2015年以来,巴拉尼协会、中华耳鼻咽喉头颈外科协会、美国耳鼻咽喉头颈外科学会和日本平衡研究学会陆续制订了本国的MD诊断标准,每个标准都吸收了当时的最新研究成果,同时治疗方案也发生了相应的变化。本文从MD的诊断标准和治疗方案的最新研究进展进行综述。
期刊
近年来,随着人工智能技术的迅速发展和计算机信息融合处理能力的大幅提升,自动驾驶技术的智能化水平不断提高,自动驾驶汽车正逐渐从特定的结构化场景(如试验园区、高速公路)走向相对复杂的交通环境(如城市)。由于城市交通环境路况复杂,行人、车辆等动态且轨迹多变的目标较多,并容易形成遮挡,这些因素给自动驾驶汽车进行高效准确的环境感知造成较大困难。在这种复杂道路条件下,基于计算机视觉技术的环境感知方法存在一定的
学位
煤炭和铁矿石在满足全球能源需求中发挥着重要作用。煤炭种类/原产地信息、铁矿石品牌/原产地信息为煤炭和铁矿石质量评价、进出境税收征管提供技术支撑。在煤炭和铁矿石入岸通关前对其品质、种类、产地进行检验必不可少。由于我国煤炭和铁矿石对外依存度高,每年进口煤炭和铁矿石数额巨大,采用传统化学检测方法需要基于一系列指标,能耗大,检测周期长,不利于口岸快速通关。近红外光谱具有制样简单,快速无损分析等优势,在煤炭
学位
<正>原发性三叉神经痛(primary trigeminal neuralgia, PTN)是常见的神经系统疾病[1],表现为三神经分布区内短暂的反复发作的剧痛。一侧颜面发病多见,极少数双侧发病,主要累及眼睑下至口角(上颌支)或口角至颈上部(下颌支)[2],在口角、面颊、舌部可触及引起疼痛的敏感点,即“扳机点”[3],可因刷牙、漱口、饮食等诱发。
期刊
激光等离子体相互作用中的受激拉曼散射(Stimulated Raman Scattering,简称SRS)和受激布里渊散射(Stimulated Brillouin Scattering,简称SBS)等参量不稳定性对惯性约束聚变有重要影响。其中SRS会改变入射激光方向,影响辐射场均匀性,并产生超热电子影响靶丸压缩效率。SRS的早期研究集中在线性理论部分,目前非线性理论研究通常采用理论求解和数值模拟
学位
模拟仿真训练作为一种低损耗、低风险、易组织的训练方式,是信息化时代背景下一种重要的军事训练方法。传统的模拟训练系统主要以“鼠标+键盘”的方式实现交互,具有训练周期长、缺乏沉浸感等弊端。近年来,深度学习技术的快速发展极大的推进了人工智能的进步,众多的领域都在探索机器的智能。这为模拟训练系统的建设提供了新的思路。将语音交互应用于模拟训练系统中,有利于增强沉浸感,提升训练效果。对话系统是语音交互中的一个
学位
波动问题的研究一直是物理学领域的热点话题,数值模拟一直是研究复杂介质中波传播问题的有效工具,而复杂海洋环境中声波的传播特性也是海洋声场分析的主要研究内容。本文针对二维海洋声场问题,引入伪谱法,利用Fortran和Matlab程序建立二维波导模型,采用理论分析和数值模拟相结合的方法,围绕基于伪谱法的水声传播特性开展研究。可为研究较远距离水声传播特性、中尺度海洋现象中水声传播特性及地震海洋学中的水声正
学位
搅拌摩擦焊技术以其成本低、接头性能好、绿色环保等优点,被广泛应用于铝、镁合金等低熔点材料的焊接中。随着汽车、军工、航空航天领域对高熔点材料需求的日益增长,学者们开始将该技术推广到高熔点材料连接中。但焊接过程中的数吨位级的焊接力加剧了磨损,缩短了搅拌头的可用寿命;同时较大的流变应力限制了高熔点材料的良好成形,影响了接头质量。为此,本文针对高熔点材料Q235B低碳钢开展辅助热源下的焊接工艺试验与数值模
学位
目的 比较全程神经内镜下血管减压术(NVD)与显微镜下血管减压术(MVD)治疗原发性三叉神经痛(PTN)患者的效果及对患者疼痛介质、氧化应激、复发情况的影响。方法 选取焦作市第二人民医院2019年4月至2021年12月收治的142例PTN患者,根据手术方案分为神经内镜组和显微镜组,各71例。显微镜组接受MVD术治疗,神经内镜组接受NVD术治疗。比较两组临床疗效、疼痛缓解情况[疼痛缓解时间、视觉模拟
期刊