基于2D图像与3D可变形模型的人脸旋转与识别方法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wang9230c
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸识别的实际应用中的各种复杂变化,尤其是人脸姿态变化会严重地限制人脸识别系统的性能。虽然通过人脸旋转可以弥补训练数据的不均衡分布,从而提高人脸识别系统的性能。但是,以前的多数方法侧重于身份信息的保留,实际效果有欠缺。为此,本论文提出了基于注意力机制的指定姿态生成对抗网络(Attended PoseGuided Generative Adversarial Networks,APGAN),以根据源姿态人脸图像,旋转并合成任意目标姿态、具有视觉真实性的人脸图像,同时保持其身份和表情信息;然后以集成学习的方式识别人脸表情与身份。本论文提出的模型主要由结合注意力机制的指定姿态生成器和双判别器组成,它们采用自适应注意力机制专注于人脸关键区域,在人脸旋转过程中解析并重构局部结构和纹理,实现更精确的信息一致性。集成表情学习充分利用共享的底层特征和两个任务之间的潜在相关性,进一步提高表情识别能力。采用属性纯化、动态损失权重和交替数据集训练策略,增强性能并缓解过拟合问题。在APGAN模型的基础上,本论文结合3D可变形模型(3D Morphable Model,3DMM)在提取人脸立体结构方面的优势,提出了3D-AGAN模型。根据人脸3D模型旋转并预渲染中间图像,使用人脸渲染模型修复材质失真,实现更加可靠的人脸旋转与识别。本论文提出的APGAN模型与3D-AGAN模型在小规模受约束数据集KDEF与大规模无约束数据集CASIA-Web Face上进行训练,以增强模型的鲁棒性。通过定性分析和定量对比等方面的实验结果阐明,本论文提出的模型优于现有的其他人脸旋转方法和表情识别方法。基于以上人脸旋转与识别模型,本论文实现了智能人脸旋转与识别系统(MultiAngle Face Expression Recogintion,MAFER)。该系统同时满足计算的时效性与界面交互的亲和性,具有良好的实用价值。
其他文献
冰霜可以造就美丽的景色,给人们带来视觉盛宴,但另一方面也会给人们的生产生活带来许多不便,更有甚者会影响人们的生命安全,因此开发有效的抗结霜技术势在必行。近年来,研究者们针对抗结霜进行了大量的探索,常用有淋水法、电加热法等。它们存在成本高、效率低、能耗高等缺陷,而利用超疏水表面改性技术抗结霜,操作简单、成本低廉、效果可控,应用前景广泛。即便如此,超疏水改性技术依旧存在许多问题,例如在平板基材上研究超
学位
烷基取代苯是一种常见的人为源挥发性有机污染物,主要存在于城市大气中,燃料燃烧和溶剂挥发是大气中烷基取代苯的主要来源。烷基取代苯是大气中二次有机气溶胶的重要前驱体,形成的二次有机气溶胶会进一步引发酸雨、光化学烟雾和雾霾等环境污染问题,并对人体健康造成危害。相关研究表明,烷基取代苯的大气氧化几乎都是由OH自由基引发的,随后人们以此为依据对烷基取代苯的大气氧化机理进行了一系列研究。然而,目前对烷基取代苯
学位
层状GaS半导体材料以其2.6~3.1 eV的宽禁带特性,填补了层状窄带隙半导体材料和层状绝缘体材料之间的带隙空白;以其优异的光电特性,在新兴的光电子器件领域展示出了广阔的应用前景。然而,在GaS的生长方面,目前存在着GaS物相不可控、GaS纳米片尺寸小和GaS薄膜不均匀生长的问题;在GaS晶体管的电学性能方面,目前存在着载流子场效应迁移率普遍低的问题,结果损害了GaS探测器的光电性能;在GaS探
学位
太阳能热水器凭借价格低廉、制造简单和维护方便等优点被广泛应用于太阳能热利用领域。基于相变材料的蓄热器可以及时将太阳能以潜热的形式储存,并在需要时释放大量热量用于制备生活热水,从而解决太阳能在时间和空间上分布不均的问题,缓解能源供需矛盾,提高能源利用率。相变材料的蓄热、放热效率极大地受蓄热器换热结构的影响,为保证流体与相变材料的高效传热,实现热水的快速供应,本文紧密围绕基于定形复合相变材料的蓄热器开
学位
酸性矿山废水(AMD)污染流域易孕育形成一种特殊的含铁羟基硫酸盐次生矿物——施氏矿物。施氏矿物对酸性矿山废水中的重金属能起到暂时固定的效果,但结构并不稳定,易随着环境的改变发生溶解和相转变,原先固定于矿物中的重金属会因此进行再分配。施氏矿物对磷酸根(PO43-)有很高的亲和力,且PO43-在吸附和共沉淀过程中能与施氏矿物结构中的硫酸盐发生交换,可能影响施氏矿物转变途径,但PO43-对施氏矿物的转化
学位
硒是人体生命活动必需的一种微量元素,具有多种生物活性功能。研究表明适量补充硒元素能提高机体免疫力、预防多种疾病。但由于无机硒对人体有较大的毒性,通过农作物的富集作用使有机硒元素进入人类食品链是一种安全有效的补硒途径。本研究利用大麦发芽过程,将无机硒(亚硒酸钠)经过生物富集作用转化为有机硒,培育出富含有机硒的富硒麦芽,并优化了富硒麦芽的制备工艺。在此基础上,探究了在大麦发芽过程中,富硒对麦芽主要营养
学位
苹果汁可以为人类提供多种营养物质和生物活性物质,是一种广受消费者喜爱的果蔬制品。尽管苹果汁的酸性环境不适宜食源性病原菌的存活与繁殖,但仍有研究报道相关食品安全事件。传统使用的热杀菌方法会导致果汁中的部分热敏性成分的流失以及感官性质的变化,因此现亟需开发一种新型杀菌技术,结合热超声技术和植物源抗菌剂,既能保证苹果汁的食品安全,又能确保对食品的品质没有显著影响。具体研究如下:经过抑菌实验筛选,选用香草
学位
随着全球经济向“服务经济”转变,制造业企业也深受影响,开始从传统的“生产型制造”逐渐向“服务型制造”转变,在此大趋势下,服务业对制造业转型升级的支撑作用开始体现,但我国的服务业特别是生产性服务业相对薄弱,对制造业的转型和支撑作用相对有限,而外资进入可以弥补本国服务业不足。在此前提下,2016年国务院批准通过了《服务贸易创新试点方案》,将15个省市(区域)划分为服务贸易创新试点城市,在试点城市推进服
学位
近年来,环境污染、气候变化问题愈发严峻,极端天气频发,威胁人类的生命财产安全;此外,人口老龄化、教育发展不均衡、贫富差距拉大等社会问题也逐渐凸显,对全球可持续发展产生不良影响,同时也把风险传导到金融系统和经济体系中。而企业作为经济活动的重要参与者,他们在环境保护、社会责任、公司治理上的表现不仅影响着自身的发展,而且也影响着自然环境和人类社会的可持续发展。随着可持续发展理念日渐深入人心,市场各方参与
学位
结构性产品包括结构性存款和结构性理财产品,其中结构性存款是我国商业银行发行的最主要的一类结构性产品。近些年来随着衍生品市场的发展,未来场外期权市场将会是个巨量市场,结构性产品设计、挂钩标的、收益结构也会更加丰富,现在很多证券公司也开始参与设计发行结构性产品。由于产品结构设计的复杂性、发行方投资方间的信息不对称和国内衍生品市场的不成熟,我国结构性产品市场还存在很多问题,监管部门近些年来也开始重视结构
学位