自动三维人脸迁移算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:simon_dai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸的捕获、分析与处理一直是是计算机视觉中的重要课题。随着数码相机、手机等设备的不断普及,二维人脸数据的捕获变得触手可及。相比而言三维人脸数据的采集较为困难,主要途径是通过三维扫描仪进行捕获。以白光、激光等为基础的三维扫描仪精度很高,但对人眼、皮肤等存在一定的伤害。近年来基于红外的深度相机设备的有效采集距离越来越近,英特尔公司推出的RealSense系列产品更是将此距离缩短到30厘米之内,搭配Kinect Fusion等经典算法,使得深度相机采集人脸数据变得切实可行。捕获到的面部数据除了简单的信息记录功能,也常常被应用于信息加密、安保监控、娱乐等领域。最近几年社交媒体的快速发展带动了人脸迁移(即“换脸”)应用的兴起。二维的“换脸”常用于面部交换、照片合成、隐私保护等方向。相比而言三维“换脸”更具实际意义,可应用于大型3D游戏中“面部补丁”的定制,也可应用于3D打印等实际场景。但目前存在的三维“换脸”应用较少,且存在几何相似性差、兼容性差、过度局限于给定的模型库等问题。三维人脸数据采集除了记录人脸的色彩信息,还需记录其三维几何信息,以及两者之间的匹配关系。对应于信息的采集,三维“换脸”也需从几何、色彩两个角度去保证效果,其基本指标是:几何相似、无缝融合、特征匹配,扭曲少。本文提出了一套基于深度相机的全自动三维人脸扫描及“换脸”系统。系统包含扫描与“换脸”两个模块,且二者无缝衔接。扫描模块的贡献在于,利用红外深度相机在极短时间内快速采集并重建出带纹理效果的三维人脸模型,并利用特征点等信息自动裁剪得到形状较为标准的人脸。“换脸”的贡献在于无需人工交互且兼容性强。色彩方面采用基于图像梯度的无缝拼接算法进行色调预处理,以及基于能量优化的色差调节算法处理色彩融合;几何方面采用保网格Laplace的优化方法进行几何变形并自动拼接。系统的优点在于换脸效果逼真,并适用于任意带有纹理信息的三维模型的换脸。
其他文献
不同的服装面料有其特殊的物理属性,由于原材料组织结构和构造方式不同,表面肌理纹样和花色图案不同,材质的反光力、着色力就有了程度上的不同,不同的色彩在服装材质上就各具
IL500P连续流动分析仪测定环境水样中的总磷,曲线线性相关性好,检出限符合地表水要求,分析速度快,厂家配置试剂测定标准样品具有较好精密度和准确度,但实际样品测定与钼酸铵
分布于全网的城市轨道交通车站,由于所处不同区位、服务于不同特性乘客、客流量差异巨大,无论在建造规模上还是在配套设施供给上,均需差异化对待。特别是往往规划先行,需要针
本文简述了天然气站设备设施冻堵现状和危害,以某城市燃气场站为例,深入分析了该站设施冻胀、地面沉降原因,并探讨了该站关键设备发生冻堵的原因。最后研究了对应的冻胀防护
随着硬脆材料在各个行业的广泛应用,超声加工作为公认比较合适的加工方式也得到了比较多的发展。在和传统加工方式的对比中,超声加工在精度、工具寿命、工件表面光洁度等方面
<正>水稻二化螟,俗称钻心虫,是赤壁市水稻常发、重发虫害之一,常年发生面积达到2.67万hm2次以上,一般年份对我市水稻产量造成的损失在3%以上,随着全市农药使用量逐年加大,致
本报讯 (记者 庞磊成) 昨天是第106届中国进出口商品交易会二期开幕首日。上午,市委副书记、市长汤锡坤专程赶赴广州琶洲展馆看望、指导潮州参展企业。汤锡坤勉励参展企业要认清
报纸
我国是原木消耗大国,林木资源短缺,木材需求增长旺盛、人工林单产低和林龄结构不合理等问题使得国内木材实际供给能力有限。在此背景下,进口其它国家原木、拓宽原木供给渠道,
随这移动智能终端设备的普及,恶意移动应用也随之快速持续增长。为了应对Android智能终端的安全隐患,本文提出了基于深度学习的静态检测方法,该方法采用了权限和Jimple指令码
气膜冷却是现代高性能燃气涡轮热端部件的重要冷却方式,随着航空发动机性能要求的不断提高,未来涡轮前燃气温度将达到2300K以上,传统气膜冷却技术已不能满足未来热端部件的冷