基于生成模型的三维重建算法研究及实现

来源 :宁夏大学 | 被引量 : 0次 | 上传用户:ji55643212
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着三维重建任务在智能制造、安防监控、智能驾驶、视频交互、医学诊断、机器人等领域的需求日益增加,从图像中实现三维重建的研究意义及价值得以体现。基于图像三维重建旨在从单张或多张图像中推理出人脸、物体或者场景的三维模型,但由于自然环境下的图像受光线、遮挡、拍摄角度、空间信息模糊等客观因素影响,给重建工作带来了极大的挑战。三维重建算法从最初研究三维到二维投影,到如今利用深度学习技术重建,重建效果得到了很大的提升。深度学习技术这几年也是快速发展,从最开始的深度卷积网络到如今的生成对抗网络、强化学习、深度图卷积网络等新技术出现,需要研究将新技术应用在三维重建任务中重建精度、重建效率等方面得到提升。本文旨在将生成对抗网络技术应用到三维重建任务中,提出一种新的三维重建方法。将人脸三维重建问题转换成从图像生成三维模型问题,利用生成模型强大的学习数据分布能力,使算法能够解决在大姿态、遮挡、光线等多种自然环境影响重建的问题,最终能够实现鲁棒的基于单张图像的人脸三维重建算法。本文的主要内容和工作如下:1.针对在自然环境下的人脸大姿态的重建问题,本文第三章提出了基于生成模型的分级人脸三维重建算法(FSGANA)分图像可见模型和不可见模型两阶段重建。第一阶段算法根据图像中人脸区域的特征重建可见部分模型,第二阶段算法根据第一阶段重建的可见部分模型和人脸图像利用生成模型GAN生成图像中不可见部分的三维模型,两阶段逐级重建出完整三维人脸模型。实验证明重建效果优于现有经典的人脸重建算法。2.深度学习网络需要大量的数据用于训练,将三维重建任务分为两阶段重建,虽然在重建精度上取得了很大的提升,但给训练和测试使用阶段大大增加了时间成本。为了既能解决时间又能够利用生成模型优秀的三维模型生成能力,本文第四章提出了基于生成模型的端到端人脸三维重建算法(P2UGAN),设计了由粗到细的生成器和UV空间鉴别器,彼此之间相互对抗实现共同优化,最终重建出理想的三维人脸模型。3.为了将三维重建算法,包括人脸、物体、场景等的重建算法集成在一起,能够为用户提供在线交互功能。本文设计了一个能够集成多种三维重建算法、提供在线交互、系统级接口访问等多功能的三维重建系统。
其他文献
有序分类数据,即响应变量为有序多分类变量的数据在医学和组织学中非常常见。随着DNA技术的发展,越来越多的医学研究着手于探索疾病与患者基因表达之间的关系,而基因表达数据通常都是超高维(即p>>n)的。传统的解决有序分类问题的统计方法全部要求解释变量的维度p要小于样本容量n,因此它们在高维情况下并不适用。为了解决高维情况下的有序分类问题,本文基于一般的连续比率模型,并且考虑了模型中同一变量
金融波动率序列的建模和预测一直是学术界研究的热点,也是金融市场关注的核心问题。金融波动率序列的重要特征之一即自协方差系数缓慢衰减,关于这一特征产生原因,主流的解释是数据生成过程为长记忆或结构变点。然而,针对不同的数据生成过程,预测策略的表现是不尽相同的。本文针对只单独存在长记忆或结构变点的情况和长记忆与结构变点共存的情况,分别提出预测方法。针对前者,本文采用基于判别检验的预测方法,针对后者,本文提
清代是中国最后一个封建社会朝代,也是旧中国茶叶对外贸易的鼎盛时期。其中中美茶叶贸易是中国对外贸易的一个重要部分。自独立建国开始,美国便展开了对华贸易,到清代末期,茶叶始终占据中美贸易的核心商品地位。研究中美茶叶贸易,有助于我们认识清代茶叶对外贸易的发展特点及影响因素,了解中美早期的贸易往来。本论文主要分为四大部分,将清代中美茶叶贸易整体分为三个阶段探讨,分别为兴起阶段、繁荣阶段和衰落阶段。具体围绕
弛豫铁电单晶由于其优异的性能引起了铁电研究领域的研究热潮,其中三元系弛豫铁电单晶Pb(In1/2Nb1/2)O3-Pb(Mg1/3Nb2/3)O3-Pb Ti O3(PIN-PMN-PT)和Mn掺杂的PIN-PMN-PT(PIN-PM
流体力学是力学的一个分支,它是研究流体现象及相关力学行为的科学,它根据不同的”力学模型“分为理想流体力学、可压缩流体力学、非牛顿流体力学等.如今,非牛顿流体力学已经发展成为基础科学体系的一部分,因此对非牛顿流体的研究是很有必要的.近年来,由于科学技术的迅速发展,非牛顿流体的研究和应用越来越重要.除数学领域,非牛顿流体在我们的日常生活中也十分常见,比如人身上的血液、淋巴液等多种体液,化学上应用的泥浆
市场经济的快速发展在公司中催生了关联交易这一新的交易形式。对于关联交易,我们应当一分为二地看待,一方面,它能够提高交易的效率和效益,使公司以较低的时间和金钱成本实现
自改革开放以来,消费低迷与内需不足一直都是困扰中国经济结构升级与持续增长的难题。与之形成鲜明对比的是,随着中国经济的发展,收入差距大有愈演愈烈之势,本文认为现如今日益扩大的收入差距是造成消费低迷的主要原因之一。中国对于造成居民消费低迷原因的研究汗牛充栋,而大多数研究只涉及消费者自身的有关因素,忽略了中国居民消费的非独立性与存在着周期性消费高峰的特点。现有的涉及收入差距影响居民消费的研究,在实证研究
多相流流动特性的参数检测和研究已经成为多相流问题的研究重点,其普遍存在于人们的生活和工业生产中。在石油天然气的开采过程中,随着油藏的不断开发,在开发过程中控制石油天然气的出油量和出气量尤为重要。在开采过程中,实时的监测输出量,可以对油气井在不同阶段的开采进行定量评价,制定更优化的开采方案。其中,石油气在管道中的流动形态从宏观意义上属于气液两相流的流动形态,两相流的流动特性研究作为多相流检测中的基础
自我控制对促进大学生的身心健康发展及良好的社会适应等都有重要的意义,培养良好的自我控制能力是高等教育面临的现实问题。自我控制能力受诸多因素的共同影响和制约,哪种方
随着我国经济的蓬勃发展,我国的体育产业也随着国际趋势在慢慢崛起。职业体育在上世纪九十年代,以职业足球改革为契机,开始进入了中国的历史长河,作为职业体育基本单位的职业