基于注意力机制的无监督素描-人脸转化算法研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:johntoo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,当公安部门对刑事案件进行侦破时,常见的取证方法之一是通过数字远程监控系统与高清摄像头连接,获取犯罪嫌疑人的犯罪行为录像以及逃逸踪迹。但由于不法犯罪分子的反侦察意识不断增强,通常会有意识地将犯罪行为实施在无监控区域或者监控死角,甚至案发前有意识地毁坏监控摄像头,如此一来,就难以获取其犯罪行为的记录,也就无法了解犯罪嫌疑人的外貌特征,为侦查人员获取线索增加了难度。但如果案发现场有目击证人,再根据印象对犯罪嫌疑人进行特征描述,模拟画像技术人员就可以绘制出犯罪嫌疑人的素描图像,随后进行面部识别进而判别身份。但由于素描图像和真实人脸图像在纹理表达上有着巨大的差异性,直接使用传统的面部识别方法恐难以获得具有破案价值的识别结果。因此就突显了通过素描图像来重现真实人脸图像的实际意义。在从素描图像到人脸图像的转化的研究历程中,无论是早期的传统图像合成方法还是后来兴起基于深度学习的方法,如何生成视觉效果清晰逼真且在细节特征层面能够高度还原的人脸图像是研究人员一直探寻的问题。而且,素描-人脸转化对于数据集的要求较高,想要获得大量成对匹配的素描-照片的成本非常高,良好配对的数据集并不容易获得。因此,如何将素描图像有效地转化成人脸图像颇具价值、意义深远。针对这一问题,本论文提出了一种基于注意力机制的无监督素描-人脸转化算法,主要工作如下:1.对于目前图像转化算法中最具代表性的Pix2pix模型和CycleGAN模型进行了深入研究,并基于上述两种算法模型构建素描-人脸转化网络,获得实验结果。2.以CycleGAN模型为基础框架,引入计算机视觉领域的注意力机制网络,构建基于注意力机制的无监督素描-人脸转化网络(Attention-Based Unsupervised Sketch-Face Transformation Network,AUSF-Net)模型。AUSF-Net模型总共由生成器GS→F、生成器GF→S,两个对应的判别器DF、判别器DS以及两个注意力网络AS、AF组成。在具体的网络设计中,综合了U-Net网络和残差网络网络的优点,设计了基于残差网络结构的注意力网络和基于“U-Net+残差网络”结构的生成器网络,判别器网络采用了PatchGAN判别器。3.通过对生成对抗网络目标函数的研究,在AUSF-Net模型的目标函数中,对于GAN的对抗损失选用基于LSGAN的最小二乘损失函数,并且沿用了CycleGAN模型的循环一致性损失函数,引入了有助于提高生成人脸图像真实性的本身损失函数,最后的总损失函数采用权重加权的形式。最后,本论文将提出的AUSF-Net模型在CUSF数据集中的CUHK数据集部分以及CUFSF数据集上进行训练和测试。随后,根据不同实验目的设置了多组控制变量实验来验证AUSF-Net模型改进之处的优点,并展示了详细的实验结果、做出了深入的分析。之后,本章对目前图像转化领域几种经典的算法模型进行了复现并训练其完成相同的素描-人脸转化任务,与本论文提出的AUSF-Net模型进行了对比实验。通过定量比较和定性分析,展现了AUSF-Net模型的优越性。实验证明,AUSF-Net模型能通过素描图像生成清晰的人脸图像,细致入微地还原细节特征,几近重现真实原貌。
其他文献
近年来随着汽车行业的快速发展,汽车逐渐从出行工具转变成为用户提供个性化、智能化、场景化的车载服务平台。智能网联已成为未来汽车发展的重要方向,而车载AR导航是当前智能网联技术的重要创新应用。本文阐述了车载AR导航相关概念及特点,对其发展现状以及存在的问题进行了多方面分析,最后对车载AR导航技术未来的发展前景进行展望。
期刊
在精神文化需求不断增加的今天,观众对于舞美设计的要求越来越高,其关系着舞台表演效果,尤其灯光设计更是创设舞台表演情境、渲染舞台氛围的核心要素,因此加强舞美设计与灯光设计二者的结合显得尤为重要。本文在对舞美设计与灯光设计结合的重要性进行探讨的基础上,提出了促进二者有机结合的具体策略,旨在全面提升舞台设计成效。
期刊
超快激光(超短脉冲激光)在工业加工、国防军工、生物医学、科学研究等方面具有不可替代性。被动锁模光纤激光器的结构简单且设计灵活,同时易于准直,被认为是产生超短孤子脉冲的理想激光光源。被动锁模光纤激光系统中存在能量交换,属于非守恒的耗散系统,其产生的孤子脉冲在某些特定条件下会表现出复杂的动力学特性,一直是激光领域内科研人员的研究热点。本文主要围绕被动锁模光纤激光器输出孤子的动力学特性展开数值仿真和实验
学位
在研读教材的基础上设计数学实验单元教学活动,需要教师以学生的实际认知水平为基础,对教材中的数学知识进行“有度”地再创造,促进学生深度学习。通过研读人教A版高二数学选修2-1“圆锥曲线与方程”和人教A版高三数学选修4-4中“圆锥曲线的参数方程”的内容,设计以“椭圆的定义”为主题的数学实验单元教学,让学生通过亲手制作模型或操作实验,利用计算机软件进行模拟实验,体验椭圆定义的发现和发展过程,理解椭圆的定
期刊
锡由于其高的理论容量和天然丰度、合适的工作电压而受到越来越多的关注。然而,在锂化过程中巨大的体积变化、较差的反应动力学,导致其结构严重劣化、容量持续衰减和倍率性能较差,阻碍了其实际应用。为了避免这些问题,本文以分布广、可再生的生物质(柳絮)为前驱体,通过对其进行炭化预处理,形成生物质碳管,并将其与锡及氧化物(Sn、Sn O2)复合。通过对所制备复合材料的储锂性能进行系统研究,并利用第一性原理对Sn
学位
因果关系抽取任务是自然语言处理领域中的重要研究任务之一,它在知识图谱、问答系统以及事件预测等多个方向中发挥着至关重要的作用。现有的研究方法大部分是基于单任务学习,忽略了因果关系抽取任务与其它任务之间的联系。此外,语料库中含有一对多、多对多等复杂的因果关系,且非因果关系实体对(负实例)的数量通常远远超过因果关系实体对(正实例)的数量。面对文本中复杂的因果关系与因果数据稀缺的问题,这些研究方法通常不能
学位
mini-LED显示技术具有节能、高亮度与超高对比度等诸多优点,但目前红色min-LED芯片发光能力较差,限制其全彩化应用。基于荧光转换材料的激光照明技术具有节能、紧凑与功率高等特点,被公认为下一代高亮度、大功率的照明技术。然而,目前缺乏优质红色激光用荧光转换材料,限制了其应用场景的拓宽。制备小粒径、高量子效率和高稳定性的红色荧光粉,是推动mini-LED和激光照明技术工业应用的关键。为此,本文采
学位
鉴于当前部分市政工程沉井结构施工不合理的现状,本文以市政结构顶管工程为例,从施工准备和施工过程两方面着手,提出了与之相适应的市政结构顶管工程中沉井结构施工方案,旨在通过实证分析,提高技术应用效果。得出结论,即在市政工程沉井结构施工阶段应当强化采取质量控制措施,以切实提高项目施工水平和施工成效,为沉井结构整体质量的提高创造良好的条件。
期刊
随着汽车行业和物联网技术的不断发展,智能网联汽车正在成为现实。高度智能化的汽车与网络相连,使得诸如自动驾驶、智能交通和娱乐办公等一系列新兴应用和服务逐步参与到人们的出行中。这些车载应用的出现,在给人类生活带来便捷的同时,也不可避免地引入诸多挑战。新型智能应用需要强大的计算资源,虽然当前车载芯片的计算能力在不断进步,但面对大量计算密集型车载应用时仍显不足。现在普遍接受的方案是将车载应用通过无线通信卸
学位
<正>沪松府〔2022〕8号各镇人民政府、街道办事处,区政府各部门:经区政府第166次常务会议审议通过,现将《松江区教育事业发展“十四五”规划)》印发给你们,请认真遵照执行。特此通知。2022年1月14日松江区教育事业发展“十四五”规划“十四五”时期(2021—2025年),是我国在全面建成小康社会、实现第一个百年奋斗目标之后,乘势而上开启全面建设社会主义现代化国家新征程、向第二个百年奋斗目标进军
期刊