夜间模式下场景特征识别与大视场三维重建的研究

来源 :东华大学 | 被引量 : 4次 | 上传用户:zuiaiyunhao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在机器人应用领域,许多人工难以胜任的恶劣环境下的操作通常都在夜间无光的情况下进行,机器人的夜间视野范围和场景识别能力直接关系到机器人的任务执行能力。在夜间模式下,通常采用红外成像系统获取夜间场景图像,红外图像具有无色彩、信噪比低、对比度低和缺乏深度感等特点,并且红外图像视场较窄,难以满足需要大视野观测的应用场合。因此研究如何提取和识别红外图像的场景特征信息、扩展红外图像的观测视场并进行场景的三维显示对夜间模式下的机器人视觉具有重要意义。本论文从红外图像的成像特性出发,对红外场景特征识别、红外图像大视场拼接以及三维重建进行研究。主要研究内容分为三个部分:第一部分为基于深度卷积-反卷积神经网络的红外场景特征识别算法;第二部分为基于点特征的红外图像拼接算法以及红外图像大视场拼接算法;第三部分为基于单目红外图像三维重建原理的红外图像大视场三维重建方法。论文的主要创新点有以下几点:1、提出了基于深度卷积-反卷积神经网络的红外场景特征识别算法,构造了基于VGG16的卷积和反卷积层相结合的深度卷积-反卷积神经网络,通过对训练样本进行学习,能够隐式地从训练数据中学习有效的红外场景特征,无需显式的特征提取。训练好的模型能够识别出红外图像中的天空、建筑、树木等9类目标。与现有识别算法进行对比实验,直观上本文算法对红外测试图像的识别效果较好,同时从像素准确率、各类别准确率以及平均IU三个评价标准来看,本文算法准确率均超过对比算法。2、在单目多角度扫描式的场景获取方式下,针对红外图像拼接任务,本文首先研究两幅红外图像的拼接技术,提出了基于点特征算子的红外图像拼接算法,通过相位相关法粗略估计相邻图像的位移量,在重合区域中提取特征点以及特征点匹配,有效缩短匹配时间,提高拼接效率,同时本文采用多分辨率加权融合算法对图像进行拼接合成。然后用以上算法对多幅红外图像进行拼接,针对多幅拼接产生的累积误差,本文提出基于L-M的优化算法,在拼接过程中不断地优化调整红外图像到参考平面的单应性矩阵,提高拼接质量。最后通过实验对多幅红外图像拼接得到了180°的无缝大视场图像。3、本文将红外图像大视场拼接与基于单目红外图像的三维重建方法相结合,采用了基于面板参数马尔可夫场(PP-MRF)的三维重建方法对红外大视场图像进行三维重建,获取了能反映大视场范围内红外场景的空间深度信息的立体显示图像,这对远方指挥操控人员了解整个场景及场景中各目标的位置具有重要意义。
其他文献
近年来,我国地下工程建设蓬勃发展,交通隧道工程和大型水利水电工程纷纷投入建设,同时地下工程灾害频繁发生。地下工程灾害往往造成重大的人员伤亡、严重的经济损失和恶劣的
当前,时间序列数据流预测与异常检测的方法大都为离线的,并且没有动态预测的功能,这对要求数据流无限性及实时处理的数据序列是相当不利的。本论文通过对在线最小二乘支持向量机
近年来,由于电力行业的快速发展以及日益严峻的环境污染问题,以太阳能、风力和燃料电池为主要能源的分布式发电技术在世界各国得到了广泛的应用,并将成为今后电力工业发展的一个重要的方向。分布式发电具有降低能耗、减少污染、节省投资、以及提高电力系统可靠性和灵活性等多方面的优点。然而,分布式发电在并网运行时,为了保证电网的可靠运行仍然存在许多技术问题需要解决。而孤岛效应问题就是分布式发电系统存在的一个基本问题
信息时代到来推动了通信事业迅猛发展,随着网络建设速度的不断深入,机房和高密度设备也越来越多,不同功率的设备运行时产生的热损耗造成了机房内温度分布的不均匀,而传统采取
视觉是人类观察和认识世界的重要途径,基于视频的运动人体行为分析的目的是在不需要人为干预或者尽量少加入人为干预的条件下,实现基于视频的运动人体检测、跟踪、识别人的独
我国的海上疆土非常的辽阔,海洋开发和海洋探测对于我国经济的发展具有深远的意义。由于海洋资料浮标的监测具有长期连续的特点,在海洋环境监测与海洋灾害预报中起了关键的作用
无线传感器网络由大量传感器节点组成,这些传感器节点能够实时感知并采集指定区域内的数据和信息,并传送给终端用户,实现人与物理世界之间的通信与信息交互。由于传感器节点的能
农业是我国国民经济的重要组成部分。近年来,农业物联网概念的提出与应用促进了我国现代化农业的发展。同时,农业大棚种植作为现代化农业和精细农业发展的重要技术在我国已经
仿人机器人的研究经历了几十年的发展在稳定行走方面已取得了不错的成果,但在一个具体的环境中实现复杂灵活的运动仍然是机器人功能上的一个弱点,因此仍是当下仿人机器人研究
由于风力发电系统中速度传感器易受环境的影响,并且降低了系统的可靠性,使得无速度传感器的控制方法成为风力发电系统的研究热点。本文以永磁同步风力发电机组为研究对象,在分析