基于置信度传播、语义信息和特征增强的深度补全研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:yinfeiyangfang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
场景深度补全旨在通过算法补全深度图中空洞区域以得到稠密且精确的深度图,是计算机视觉中的一个重要课题。所获取的深度图信息在机器人、自动驾驶和增强现实等领域中起到关键性作用。神经网络强大的特征表达能力和端到端的训练方法极大地助力了深度补全的发展,本文围绕基于卷积神经网络的深度补全,分别从稀疏深度图特征提取、联合深度补全和语义分割以及联合网络的优化三个方面展开研究,主要工作和贡献如下:(1)基于置信度传播搭建了深度补全小型网络,由置信度传播模块、场景理解模块、深度优化模块和融合调精模块组成。置信度传播模块显式地考虑数据的稀疏性,解决Li DAR采集的深度图高度稀疏且不规则间隔的问题;融合调精模块融合来自深度图的深度信息和来自彩色图像的场景信息,实现由粗到精的深度补全,解决采集的深度图缺乏场景信息的问题。(2)通过探究深度补全和语义分割两项任务的内在联系,提出了一种基于语义信息的深度补全方法。搭建了基于编解码结构的联合网络模型,显式地提升了网络提取场景结构信息的能力。提出了一种跨域边缘一致性损失函数,利用真实语义分割图指导深度图的补全,解决补全得到的深度图在目标边缘区域模糊的问题。(3)通过对联合网络模型进行优化,提出了一种基于特征增强的联合网络模型,由编码模块、特征去干扰模块和交互解码模块组成。特征去干扰模块对网络中的共享特征进行拆分和重组,解决共享特征中的信息干扰问题。交互解码模块实现解码阶段的信息交互,包括语义分割对深度补全的单向指导,以及联合任务间的双向交互。
其他文献
政治安全是指国家主权、政权、制度、意识形态等方面免受威胁、侵扰、颠覆与破坏。在国家安全体系中,政治安全是其根本,是巩固国家政权的重要条件,也是执政党的一项重要工作
20世纪早期,民众主义在拉丁美洲的土地上悄然兴起,三四十年代,又进入全新的发展时期,经历一段时期的低谷后,又在二十世纪的尾声以看似截然不同的形式卷土重来。民众主义可以
我国《物权法》第28条规定了法律文书导致的物权变动,但该法律条文具有模糊性,哪些法律文书于生效时能够导致物权变动并不明确,尽管《最高人民法院关于适用若干问题的解释(一
表面增强拉曼散射(Surface-enhanced Raman scattering,SERS)具有高灵敏度、免标记、无损伤、快速高效等优点,在医疗诊断、环境监控和食品安全检测等领域蕴藏着巨大的应用潜能。为了开发高效率的SERS平台,科研工作者开发了各种方法、策略。但如何制备大面积、可重复、稳定、低成本的SERS基底仍是国内外研究的热点之一,也是目前亟待解决的一个难题。本文主要是基于金属表面等离激
随着中国经济与社会的高速发展,许多中国家长意识到传统的自然和人文学科并不是孩子专业发展和未来就业的唯一出路,或重视到孩子的艺术天分,或希望孩子从事艺术行业。因此也
软件定义网络(Software Defined Networking,SDN)是一种从数据转发平面中分离控制平面,以实现支持网络虚拟化的新型网络架构。SDN拥有控制平面和数据平面的解耦、可编程性、可扩展性等众多优点。SDN体系架构使网络能够监控通信流量并诊断威胁,以促进网络取证、安全策略更改和安全服务插入。然而,带来种种优点的同时,控制和数据平面的分离也带来了新的安全挑战。从层面上看,因为控制器在
非物质文化遗产是“各族人民世代相传并视为其文化遗产组成部分的各种传统文化表现形式,以及与传统文化表现形式相关的实物与场所”①,是中国传统文化的代表之作,也是中华民
近海油气资源的逐渐枯竭促使海洋资源开发向深海拓展,海洋平台结构也相应地由重力式向浮式和半潜式转变。其中,动力锚作为锚泊系统中一种经济便利且承载力高的基础形式正被越来越广泛的应用到深海资源开发工程中。目前应用最为广泛的动力锚有OMNI-MaxTM和鱼雷锚,但安装稳定性差、承载效率比低及易被拔出等缺点使它们的使用受到一定的局限。因此,设计弥补上述缺点的新型动力安装锚具有重要的工程意义。刘君等在以往动力
本文以我国推进服务型政府建设、深化行政体制改革为研究背景,以为鞍山经济开发区开展服务型政府建设提供指导性意见、丰富我国服务型政府建设理论体系为目的,使用实证分析法
第五代移动通信技术(The 5th Generation of Mobile Communication,5G)对空口技术提出了更高的要求,传统的正交多址接入技术,需要为每个接入的用户分配正交的资源从而降低接