基于视频信号的无监督深度估计和相机姿态估计

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:adsghah
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在三维技术日益完善的今天,对于深度信息的需求在日常生活中随处可见。在自动驾驶和三维重建中,深度信息对于位置关系的准确描述起到了至关重要的作用。在三维显示技术中,也需要利用深度图实现虚拟立体视觉。在进行深度估计时,利用神经网络能够有效地提高得到的结果图的准确性,但由于深度图片的真实值在获取时存在着造价较高且图像的分辨率较低等问题,因此无监督学习在这个任务中发挥了重要的作用。利用无监督学习训练的基于单目视频的深度估计能够充分利用单目图像中的信息,将深度估计和相机姿态估计相结合,以成的准确性作为网络的目标函数,实现对深度信息的无监督估计。单目视频的深度估计一直被认为是一个不适定(ill-posed)问题,它以单目图像或视频序列为输入,经过深度估计系统,根据图中边界、雾化效果以及位置关系中隐藏的几何结构信息,得到与原图对应的深度图。由于深度估计过程中利用的平滑约束对于深度估计结果的影响,会导致深度估计结果边界模糊。本文针对单目视频深度估计过程中出现的深度图片边界模糊问题,研究了深度图片的平滑处理和网络训练的自监督过程,提出了改进的方法,具体工作如下:1.针对深度图片中平滑处理,提出了基于动态滤波网络的深度图片平滑处理方法。利用动态滤波器网络产生的滤波器建立深度图片和彩色图片之间的联系,自适应地对深度图片的变化情况重新滤波处理。相较于基础的网络结构,深度估计结果在准确性上提升了1.35%,而对于角度估计没有明显的影响。2.针对网络中的自监督问题,提出了一种基于超分辨任务的可用于训练过程的自监督方法。利用深度图片在超分辨任务中的作用,在深度估计网络中加入了超分辨结果和原图的对比作为监督信息,并将这一信息加入到了特征图中。本文所用的超分辨是按照深度图片的变化,决定超分辨过程中选用何种插值方式并合理分配各种插值方式所占的比例,根据超分辨图片和原图之间的差别衡量深度估计的准确性,从而提升深度估计的准确性。实验结果表明,深度估计的准确性提升了3.65%,角度估计的准确性也有所提升。
其他文献
第一部分长时间妇科腹腔镜手术对呼吸动力学和生理死腔量影响的临床研究背景:长时间的妇科腹腔镜手术需要长时间的气腹和Trendelenburg体位,对呼吸力学和肺功能指标产生较大
研究目的:特应性皮炎(atopic dermatitis,AD)是一种慢性复发性炎症性皮肤病,其病理机制尚未明确,在亚洲AD患者中,Th17的异常扮演着重要的作用。清热祛湿方(QRQS)是一种中草药配方,主要功效为清热祛湿,我科常将其用于缓解皮肤炎症和瘙痒,临床疗效可靠。研究目的是评价QRQS是否对Th17介导的AD模型小鼠具有治疗作用,并探讨其可能的机制。材料和方法:Flaky tail小鼠(f
目的探究我国真实世界中,不同地域医院之间行经皮冠状动脉介入治疗(percutaneous coronary intervention,PCI)的急性冠脉综合征(acute coronary syndrome,ACS)患者的长期预后的差异,并分析这些患者出院后对二级预防用药的依从性。方法冠心病抗血小板治疗优选方案(Optimal anti Platelet Therapy for Chinese p
本文在研究目前抽油机平衡度评价方式和平衡度对抽油机影响研究现状的基础上,认真分析总结抽油机平衡的意义,对抽油机的平衡度评价方法和评价标准进行了研究,对影响抽油机平
英国学者达夫曾言,司法裁判是否达到公正,与形成裁判的程序是否公正有着内在关联,即司法裁判的质量会因为程序不合理而受到损害。程序正义理论在西方率先兴起并占据主流程序法研究领域,昭示着刑事正义有了包含程序正义在内的新标准:使受刑事裁判直接影响的人亲自参与结果的产生过程,给予其表达与辩论的机会,以透明的过程向其证明司法裁判产生的根据和理由,从而使他成为一种理性的主体。只有这样,所作裁判才更具有可接受性、
海岛棉具有纤维长度、比强度、细度等优势,在农业生产、国民经济中具有很重要的地位。然而棉花枯萎病的蔓延严重地影响着海岛棉产量和品质,给农民的经济水平带来了负面的影响
在数学上,图分割(Graph Partition)是指将一个图分割为若干互不相交的子图,而在实际应用上,图分割是分布式图计算系统中的一个重要组成部分,其旨在平衡每个子系统的工作量和
了解和掌握水土保持空间格局,可以更好地为区域可持续发展和水土保持生态环境建设服务。本研究选取黄土丘陵区彭阳县为研究区,以1995-2015年为研究时间尺度,基于遥感数据、DEM数据、土壤数据、气象数据等,在ArcGIS、ENVI和MATLAB等平台的支撑下,集成利用3S技术、RUSLE模型、BPNN模型、InVEST模型、像元二分模型、趋势显著分析法、地形面积差异修正等方法,以植被恢复为背景,首先
随着市场竞争的不断加剧,可靠性已经成为产品的一个重要性能指标,受到用户和市场的关注。老练测试和故障预测是可靠性领域的两个热点问题,是确保产品和系统可靠性的重要途径,
随着陆地石油资源的不断开采,很多陆上油井已进入开采中后期,海上石油的开采已经变的越来越常见,未来超过四成的油气总储量将来源于海洋。我国海洋油气资源开发潜力巨大,对海