基于深度图像绘制的虚拟视点合成技术研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:zhouxin313333
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着多媒体技术和3D技术的发展,自由视点视频(free-viewpoint video,FVV)备受关注,因为它能为用户提供从不同视角观看视频的体验。为了提供这种体验,自由视点视频技术需要获取多个不同视点的视图。然而,直接拍摄并传输所需数量的视图并不是有效的解决方案。基于深度图像绘制(depth-image-based rendering,DIBR)的虚拟视点合成(virtual viewpoint synthesis)技术的出现能够支持通过有限数量视点合成更多视点的需求。尽管DIBR技术是一种简单的方法,但其存在着重叠、裂纹和空洞问题,影响了合成视图的质量。本文的研究目的是解决上述问题并提高虚拟视点合成的质量,促进DIBR技术在自由视点视频中的广泛应用。本文针对上述问题展开了深入研究,主要研究成果和创新点如下:(1)针对DIBR技术中的重叠问题和裂纹问题,本文提出了一种基于深度的极线排序算法。该方法结合了极线排序算法和Z-buffer算法的思想,在三维图像变换的过程中处理重叠和裂纹问题。同时,该方法还通过检测深度图中的深度值跃变来标记和跟踪物体的边缘像素点,以在处理过程中保持物体的边缘结构。(2)针对DIBR技术中的空洞问题,本文提出了一种基于生成对抗网络(generative adversarial network,GAN)的空洞填充方法。该方法通过边缘补全网络预测空洞区域的边缘,然后基于预测的边缘来引导空洞填充网络进行空洞填充。在空洞填充阶段,还引入了由粗糙到精细的网络结构、色差补偿模块和内容感知层,以提升空洞填充的质量。(3)针对基于生成对抗网络的空洞填充方法存在的前景信息填充背景空洞的问题,本文提出了一种基于图像重投影(image re-projection)的位置注意力机制。该方法通过图像重投影计算目标图像要与参考图像垂直对齐所需的旋转角度和垂直平移距离,然后根据三维图像变换关系计算目标图像与参考图像的水平视差,以在网络训练时模拟目标图像的空洞位置和形态,从而进一步提升目标图像空洞填充的质量。本文在多个数据集上对提出的方法进行了主观评价和客观评价。实验表明,本文提出的方法能够生成视觉质量较好的虚拟视点视图。上述研究成果可为自由视点视频的应用提供一定的参考价值。
其他文献
本研究以植物乳杆菌ATCC 14917为研究对象,利用全基因组重测序技术,研究其在β-内酰胺类抗生素进化过程中的耐药性,同时分析其在获得耐药性后表型和益生特性的变化,以期获得一株适应性成本小、高耐药的益生菌菌株,为功能性食品研发提供重要的菌株资源。第一部分:植物乳杆菌对β-内酰胺类抗生素的耐药性研究。采用宏量肉汤稀释法研究植物乳杆菌进化过程中的耐药性(最小抑制浓度,MIC),结果表明,植物乳杆菌原
感应耦合式电能传输(Inductively Coupled Power Transfer,ICPT)具有设计灵活简单、电能传输稳定可靠、通道抗干扰能力强的特点,在植入式医疗设备、无线充电汽车、航空航天、滑轨式设备等领域具有很大的应用前景。在实现电能传输时,往往还需获取设备运行状态,由上位机发送指令对设备进行控制,同时设备采集到的数据同样要发送至上位机,这就要求ICPT系统具备数据双向传输的能力。论
动态随机存储器(Dynamic Random Access Memory,DRAM)的低存储密度已经无法满足大数据时代下应用程序对内存的需求。新型非易失性存储器(Non-volatile Memory,NVM)具有低能耗、高存储密度和支持字节寻址等优点有望能缓解内存发展速度的问题。在混合内存体系结构中,利用DRAM和NVM优势,将读频繁些写冷门的数据写入到NVM,同时将写频繁的数据加载到DRAM内
随着汽车的普及,不可再生能源日益枯竭,大气污染问题愈演愈烈,引发各界人士的广泛关注。清洁能源具有很大的发展潜力,研究发现燃料电池具有此特性,因此逐渐成为当前主流车载能源之一。然而,燃料电池动态响应速度较慢,能量无法进行双向流动,导致车辆性能受到严重影响。考虑到超级电容具有功率密度高、能量可以双向流动的特点,可将其与燃料电池结合使用,使两种能源协调工作从而提升汽车动力系统的性能。该混合动力系统能够充
随着大数据、人工智能、云计算等技术的快速发展,电子商务、商业智能、大数据分析等技术的市场化应用,针对于海量数据存储有了较高要求,并随着数据量激增而不断调整。在如今的信息时代,数据随处可见并且逐日递增,往往这些数据来源复杂、存放分散,各应用业务系统也彼此独立,从而形成一个个信息孤岛。为了更好的收集与存储海量数据,确保数据的安全性,同时完善对数据的管理使其在大数据时代能够更好地为企业、社会以及科学研究
珊瑚菌属Clavaria Vaill.ex L.是珊瑚菌类真菌中的重要类群,其典型特征是子实体呈珊瑚状或拟棍棒状,少数有分支,菌丝无锁状联合。在世界范围内分布广泛,主要分布在热带及温带地区,截止2008年,该属有28种。在中国,珊瑚菌属的分类学和分子系统学研究尚不完善,在此之前仅记录了10种,因此本研究基于采自中国不同地区的珊瑚菌属材料,对中国珊瑚菌属进行分类学及系统发育学研究。本研究所用标本采自
近年来,工业上广泛使用的有机合成染料,由于其致畸、毒性和致癌性,且化学性质稳定,不易降解,使水环境恶化,给人类健康带来了许多潜在的问题。然而,随着与染料相关的工业的快速发展,有机染料变得不可或缺,因为它们在染色纸、化妆品、染色棉和皮革工业中有着广泛的应用。因此,研究废水中有机污染物的快速、完整的去除策略是一个全球性的挑战。二氧化钛(TiO2)半导体因其长期的化学稳定性、高催化活性、无毒、强光学吸收
新时代背景下,我国房地产业虽然增速放缓,但它仍然是发展迅速的行业之一。当今时代,房地产行业正从“大鱼吃小鱼”向“大鱼吃大鱼”的时代过渡,房企与房企之间的竞争将更加残酷。未来房企之间的竞争很可能是供应链之间的竞争[1],在供应链之间的竞争中,施工总承包之间的竞争无疑是其中最重要的一环。除常规施工总承包外,如今越来越多的房企开始注重战略施工总承包的建设,目的就是在供应链之间的竞争中占据制高点,在激烈的
生产与市场的国际化以及消费需求的转变升级使得企业面临愈发严峻的竞争形势,如何合理的降低制造成本提升生产效率成为企业关注的问题,车间调度作为企业底层生产资源配置的基本形式受到越来越高的重视。目前车间调度为适应企业生产环境变化主要向多资源、多目标、柔性化、动态化方向发展,其中,如何将加工资源与运输资源这两种资源进行集成调度是目前的研究方向之一。如何建立有效合理的双资源集成调度模型、从分布式方式实现双资
紫菀族(Astereae Cass.)为菊科(Asteraceae Bercht.&J.Presl)的第二大族,粘冠草属(Myriactis Less.)和鱼眼草属(Dichrocephala L’Hér.ex DC.)是国产紫菀族的两个小属。但到目前为止对其是否是单系、其在紫菀族中的位置、属内种间关系等诸多分类学问题都未开展研究。本研究利用形态解剖学和分子系统学对粘冠草属和鱼眼草属进行分类学研究