立体图像内容编辑关键技术研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:liudongjiw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体及3D显示技术的飞速发展,立体图像资源不断丰富,并广泛应用于数字影视、工业设计、虚拟现实和增强现实等诸多领域。作为获取高质量立体图像的有效方法,立体图像内容编辑逐渐成为图像处理领域的研究热点之一。立体图像内容编辑技术旨在结合双目立体视觉原理对立体图像的分辨率、宽高比等属性进行调整。由于立体图像包含左右视点间的视差信息和场景的深度信息,图像内容编辑过程面临内容扭曲和视差失真等问题。因此,如何在立体图像内容编辑过程中联合优化立体图像内容和深度感知,获得高质量立体图像内容编辑结果具有重要的研究意义。本文以如何通过内容编辑有效提升立体图像深度感知质量为研究主线,综合考虑人眼的立体视觉特征和立体图像数据特性,重点研究视差约束引导的立体图像拼接、深度学习立体图像重定向、无监督立体图像重定向三方面工作,具体内容如下:1.视差约束引导的立体图像拼接。立体图像拼接旨在通过拼接具有重叠区域的多幅立体图像获得大视角的立体全景图。为了实现高质量的立体拼接图像,本文提出了一种基于视差约束变形与融合的立体图像拼接方法。首先,采用基于点-线驱动的视差最小化单应性方法预对齐左右图像并减小垂直视差。然后,利用多约束变形方法进一步对齐左右图像并保持双目视差信息。最后,通过视差一致性缝切割和融合方法确定最佳接缝并进行拼接。实验结果表明,该方法能够减少图像重叠区域伪影和双目视差失真,有效提高立体图像拼接性能。2.深度学习立体图像重定向。立体图像重定向旨在将立体图像调整至目标宽高比。与平面图像重定向不同,立体图像重定向需要同时保持显著物体的形状结构和3D场景的深度一致性。本文提出了一种基于卷积神经网络的立体图像重定向方法。首先,构建交叉注意力提取模型获取注意力图,该注意力图包含了左右图像自身注意力特征和共同注意力特征。其次,采用视差辅助的3D重要性图生成模型进一步保持立体图像的深度信息。最后,为了准确预测立体重定向图像,利用图像一致性损失保持显著对象的几何结构并采用视差一致性损失减少深度失真。实验结果表明,该方法能够获取良好的立体图像重定向结果。3.无监督立体图像重定向。考虑到显示设备的多样性,构建具有不同宽高比且包含真实标注的立体图像重定向数据集十分困难。为满足实际应用需求,本文提出了一种基于深度感知优化的无监督立体图像重定向方法,以解决无标注条件下的立体图像重定向问题。首先,考虑到立体图像的视点间相关性,构建视点合成损失,促进生成具有更准确视点间关系的高质量立体图像。然后,利用重定向前后立体图像的一致性,构建包含内容一致性和视差一致性的立体循环一致性损失,保持立体图像的对象结构和深度信息。实验结果表明,该方法能够有效提高立体图像重定向性能。
其他文献
我国是一个拥有着五千多年农耕文明史的国家,在漫长的农耕历史发展过程中,我国各族人民在不断的生产生活实践中创造了数量众多、风貌各异、独具地方个性和特性的传统村落。其中,由四川、云南、贵州、重庆三省一市组成的西南地区传统村落总数超过全国的四分之一,是我国传统村落分布的典型区域,对其传统村落的研究是中国传统村落研究领域中的一个重要方面。西南地区有着复杂的自然地理环境和独特的历史人文进程,这两大因素的相互
学位
海洋油污染事故发生后,起初以油膜的形式漂浮在海表面上,之后在自然波动混合及化学分散剂的作用下,油类污染物质会经历扩散、水平对流、分散、水流夹带、朗缪尔环流、沉降、分割等形式的传输和运动,被打碎并以油滴的形式存在于海水中。海洋油膜污染已经获得社会及学者们的关注,然而,分散在水体中的油滴对环境及生物也具有危害作用,因此,本文不考虑油膜污染,仅关注含多分散性油滴颗粒群类型的石油污染水体,研究分散在海水中
学位
番茄是一种世界范围内广受消费者喜爱的重要经济作物,是研究肉质果实成熟的最佳模式植物。NAC转录因子是植物最大的转录因子家族之一,同时也是植物所特有的转录因子。虽然目前有关NAC转录因子家族的研究已取得一定进展,但主要集中在模式植物拟南芥中,并且它们中的一些成员被证明在植物生长发育、成熟及胁迫应答等过程中具有重要功能。本论文以番茄‘Micro Tom’为研究材料,通过生物信息学、生理生化和分子生物学
学位
镉(Cadmium,Cd)作为一种食品中的常见污染物,极易通过食物链,在人体中蓄积,并对健康产生不利影响。最新研究表明,Cd暴露会导致人体肝脂质代谢紊乱。如何有效防治食源性镉暴露导致的肝脂质代谢紊乱是食品安全领域重点关注的问题之一。苏氨酸(Thr)作为一种人体必需氨基酸,对机体脂质代谢具有明显的调控作用。本团队前期研究发现Thr能够有效缓解Cd暴露造成的细胞毒性。相关报道也发现Thr可以抑制肥胖小
学位
化石能源的过度使用造成了能源危机、环境污染等问题。寻求可再生能源代替传统的化石能源被认为是解决上述问题的有效手段。太阳能因其取之不尽、用之不竭的特点,被认为是理想的可再生能源。但太阳能的间歇性、分散性对能源供给的连续性、稳定性带来了挑战。将太阳能转化为稳定的可储存的化学能被认为是未来太阳能高效利用的发展方向。单晶硅材料凭借其丰富的地壳含量、稳定、无毒以及成本相对较低的优势,在太阳能电池领域大放异彩
学位
习近平总书记在2018年全国生态环境保护大会中特别强调“要以空气质量明显改善为刚性要求,强化联防联控”。“十三五”期间,蓝天保卫战全面发力,从产业结构调整到清洁能源替代,从秋冬季大气污染防控到区域联防联控,全国空气质量明显改善,百姓的获得感不断增强。对大气污染防控政策进行科学评估是优化政策设计的基础,也是实现打赢蓝天保卫战目标的重要保障。目前已有研究对部分大气污染防控措施已开展评估,如:“大气十条
学位
堆石体是一种港口、水利水电等工程中常用的离散介质材料。港口工程中,随着重力式码头的大型化,其抛石基床的厚度增加,导致基床内部应力增大、抛石基床的沉降变形增大,而抛石基床的沉降变形计算还是一个未得到很好解决的问题。在堆石体受到自重和外荷载作用时,其内部块石会发生错动、破碎等变形现象。试验和数值模拟是了解堆石体的变形特性的两种常用方法。非连续变形分析(DDA)与离散元(DEM)等方法能有效模拟离散介质
学位
氢能具备热值高和环境友好等优点,是最有希望解决环境问题和能源危机的新型能源之一,但氢的制备、运输与储存是制约其发展利用的瓶颈因素。氨硼烷储氢量高、无毒且便于运输,室温下可水解制氢,是具有良好应用前景的储氢化合物,开发高效低廉的催化剂是获得更快制氢速率与更纯净氢气的关键,但氨硼烷分子与水分子在催化剂表面缓慢的吸附活化阻碍了水解反应。构建电荷极化的表面可以同时促进催化剂对两种反应物的吸附,正负电荷还可
学位
乡村振兴是十九大报告中提出的重要战略,习近平总书记指出,实现乡村振兴只有物质和经济发展是不够的,必须通过文化建设提供不断的精神滋养和发展动力。在乡村振兴战略背景下,做好优秀民俗文化的传播工作是实现乡村文化振兴的重要手段,保护和传播民俗文化具有重要的现实意义和理论价值。本文以恩施民歌文化为例,探讨乡村振兴背景下民俗文化传播策略的相关内容。本文研究总结了恩施民歌文化的历史阶段、传播现状,挖掘民歌所承载
学位
在牙科材料学的发展和研究中,具有与自然材料相近的高稳定性、高耐用性和美学特性的陶瓷材料受到了人们的欢迎。然而,复合材料本身具有的脆性使其极易作为修复材料,在承受较大的咬合压力时很容易发生断裂或损坏。而近几年,随着人们对牙齿的美学和修复材料的生物安全性要求不断提高,对新型牙科复合陶瓷的开发和新的工艺技术进行了深入的探讨。
期刊