非均匀光照条件下的自动人脸替换算法研究及实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:txk42424242
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自动人脸替换也称换脸,属于图像合成领域,它将图像中人脸的身份特征进行替换,同时保持图像中其它特征不变。其广泛应用于AI安全与隐私保护、影视制作、虚拟体验等领域,是国内外研究的热点前沿方向。该方法首先捕捉图像中需要替换的人脸,然后对人脸进行身份替换,最后将换脸图像融合到源图像中。实际进行换脸操作时,往往需要面对复杂的成像条件,其中非均匀光照是一种很常见的复杂场景。非均匀光照不光会影响人脸捕捉的性能,还会让融合的人脸图像不够真实,因此现实场景下的换脸融合度普遍不高,往往需要手工调试。本论文将对非均匀光照条件下的自动人脸替换算法进行研究及实现,围绕人脸替换、人脸捕捉、人脸融合开展如下工作:1)调研整理人脸替换领域主要的研究成果,以新的角度对人脸替换方法进行划分,并分析对比各类方法的优缺点及适用场景。特别针对基于深度学习的换脸方法,本文进行了视觉质量比较和结果对比分析。人脸替换领域尚处于快速发展当中,本文提供具有参考性的方法综述,希望对后来的研究者有所帮助。2)针对非均匀光照图像中人脸难捕捉的情况,实现了鲁棒的人脸捕捉系统,拓展了传统基于理想光照假设的人脸捕捉算法在非均匀光照条件下的人脸捕捉能力。人脸捕捉作为人脸替换的重要前置步骤,尚缺乏完整且性能良好的实现。本文针对非均匀光照场景,在传统的人脸捕捉框架中结合图像光照预处理算法实现了具有良好效果的实时人脸捕捉系统,可为任意需要捕捉人脸的场景提供帮助。3)针对非均匀光照换脸图像与背景融合不理想的情况,提出基于人脸关键点的换脸方法,该方法简化了换脸图像的光照,可获得高质量的换脸结果。高质量的换脸需要满足成像层面的真实自然和语义层面的准确身份替换,而许多现有方法只关注其中一方面。基于人脸关键点的换脸方法有助于从上述两方面提升图像质量,并在非均匀光照条件下表现良好。以上工作,已通过实验验证。在非均匀光照条件下,换脸系统可以从图像中鲁棒的捕捉人脸,合成真实的人脸图像,并可以准确地替换人脸身份且保留人脸图像中的非身份特征。
其他文献
思想政治教育过程中的基本要素和基本矛盾是思想政治教育研究中基本问题,科学地分析、认识这一问题,对于推动思想政治教育的科学发展,揭示思想政治教育过程的基本规律具有重
案件事实问题是被称为证据法学中的“哥德巴赫猜想”,是诉讼中最为争议的问题,审判中必须“认真对待事实”。然而案件事实不会自动地呈现,它是复杂的经验和思维过程。尽管案
在世界各地,网上购物正快速成为消费者购买商品的首选途径。许多在线购物网站为了争得消费者的关注,采用最多的手段之一就是在网站上贴尽可能多的产品图片,意在给购物者多样的选
【正】 I first visited Beijing in1987. Over the years I havewatched China transforminginto a vibrant consumer soci-ety. Beijing today reflects mod-ern China. Th
合唱排练的三个环节朱立纲,仝卉排练一首合唱作品,指挥者要处理好选材、排练步骤、排练方法这三个环节。一、选材适当作品的选材除了思想内容、体裁形式上要符合要求外,在技术上
撕逼年年有,今年特别多。不知不觉中,撕逼已经成为营销不可或缺的手段,甚至被不少人认为是以最小成本博取眼球上头条的最佳方式。不过,在小编看来,撕逼就像一把双刃剑,在带来曝光的
由新一代煤(能源)化工产业技术创新战略联盟组织开发的“流化床甲醇制丙烯(FMTP)工业技术开发项目”获得重大突破,该技术由中国化学工程集团公司、清华大学和安徽淮化集团有限公司
<正> 功率MOSFET的开关时间比双极型晶体管快1个数量级以上,所以,如果电路中有寄生电感L存在,电流断开时会产生反向电压Vemf,其大小如式(1)表示: Vemf=-L(di/dt) (1)比双极型
微纳结构可以对入射光进行精确调节与控制,具有选择性的反射、透射以及吸收入射光的特性,在绿色印刷、电磁屏蔽、隐身、柔性光电子、光伏太阳能电池等领域具有广阔应用前景。
英国学校音乐教学与音乐生活一瞥姚恒璐在英国,儿童从5岁开始在小学接受教育;10-17岁(即:六年级至十三年级)为中学教育阶段。中学内部又由低年级和高年级两部分组成,有些类似我国的初中和