基于改进残差生成对抗网络的人脸照片--素描转换研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:suna_lili82
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在刑事侦查过程中,素描画像是通缉、搜查、捉拿犯罪嫌疑人的主要技术手段之一。人脸照片-素描转换的目的是将提供的素描画像(或人脸照片)合成高质量的人脸照片(或素描),从而便于与照片(或素描)数据库中的图像进行匹配,检索出待识别人的身份或缩小待识别范围。为了提高人脸照片-素描转换过程中图像的合成质量,为进一步提高人脸识别准确率奠定基础,本文主要做了以下工作:
  (1)对不同的损失函数的作用进行了分析,并通过实验验证了不同配置损失函数对残差生成对抗网络模型性能的影响。基于实验分析,本文采用对抗损失和感知损失的组合作为模型训练的基础损失函数配置,并在残差生成对抗网络的基础上针对不同的问题对其进行改进。
  (2)提出一种基于自注意力残差学习的人脸素描-照片转换算法。该方法首先利用下采样块来提取输入图像的浅层特征;其次,使用嵌入自注意力机制的残差块对图像的深层特征进行编码,来自适应加权特征统计并有选择地强调重要特征信息;最后,应用上采样块重建自注意力特征,并且通过全局残差机制来进一步增强相关特征,生成与输入图像分辨率一致的最终人脸素描或人脸照片图像。同时,采用多尺度梯度技术在保证合成图像质量的同时,也避免了因生成对抗网络在训练过程中可能存在的不稳定性而对模型造成的影响。实验证明本方法无论在人脸照片合成素描任务还是人脸素描合成照片任务中,均可以提高目标域图像的合成质量且在特征相似指数、结构相似指数和人脸识别准确率方面表现优越。
  (3)提出一种基于无监督学习的风格编码的人脸素描-照片转换算法。该方法首先应用内容编码器将内容图像(人脸照片)编码为内容特征向量,同时由风格编码器对风格图像(素描画像)进行编码,经过一系列的池化和全连接计算得到风格参数,最后将风格参数加入到解码瓶颈块中,经过解码器重建得到目标风格图像(合成素描画像)。此外,由于内容和风格空间的分解,该算法的框架执行风格引导的图像转换,其中转换输出的风格由用户提供的目标域中的示例图像控制。通过与多种素描人脸合成方法的合成结果对比验证了本方法的有效性。
其他文献
海洋场景感知是无人艇等海上无人装备有效完成各类既定任务的前提,而目标检测是场景感知与理解领域的基础性任务,提升海面目标检测算法的精度对提升无入水面艇的工作能力意义重大。近年来,基于深度学习的目标检测研究取得了突破性进展,在大规模标准库上取得了较好的检测识别效果。但常用的目标检测数据集中海面目标缺乏,导致目标检测模型在海洋场景中的泛化能力较弱。与此同时,由于海洋环境更加复杂多变,高质量海洋目标样本获
目前,腰椎间盘突出症的诊断依靠医生主观判断,诊断结果的准确性会受到医生经验及知识水平的限制和影响。因此,实现腰椎间盘突出症的自动诊断具有重要的意义。本文在阅读大量脊柱疾病诊断技术相关文献的基础上,研究并开发了一套基于深度学习的腰椎间盘突出症自动诊断系统。针对椎间盘退变程度、突出位置及大小,实现了Pfirrmann分级诊断模型和MSU分型诊断模型,并构建了腰椎间盘突出症自动诊断系统为患者及医生提供诊
机器人导航是机器人领域中一项重要的技术,广泛应用于自动驾驶、国防航天、物流配送、巡逻安检等各个领域当中。近年来人工智能技术的发展,尤其是深度学习和计算机视觉等技术的发展为该领域的研究发展带来了新的契机,众多工业和学术界的研究人员针对该领域开展了丰富的研究。  虽然目前该领域已经有了诸多经典的工作,但是一方面系统设计的复杂性,对数据样本的需求以及模型的可解释性一直是不同技术框架中难以平衡的问题。另一
学位
随着人类科技应用和探索自然步伐的进一步深入,对机器人的移动能力也提出了越来越高的要求,要求其能够在复杂的地形环境下自主运动。与轮式或履带式机器人相比,腿足式机器人具有克服障碍和适应复杂地形的能力,可作为多自由度的移动承载平台,在非结构化地形完成移动任务。本文以六足机器人作为研究对象,针对六足机器人在复杂环境下的移动控制问题,研究六足机器人系统的高适应性运动规划算法与控制方法框架,力求实现基座运动与
在计算机视觉领域中,动作识别一直是一个热门的研究问题。之前的动作识别主要基于视频数据,但近几年来随着深度传感器技术的发展,人体骨架数据变得容易获取,基于骨架数据的动作识别也逐渐成为一个重要的研究方向。骨架数据是人体动作的高维表征,其相比于视频数据有着数据量小、不受复杂背景与光照的干扰、鲁棒性强等优势。早期动作识别是动作识别任务的延伸,其不同之处在于早期动作识别需要在动作结束前识别出动作类型,从而能
车辆作为城市交通网络中的重要组成部分,成为当前智能交通系统内的重点研究对象。车辆重识别旨在对车辆身份进行识别,可以在大规模监控网络中搜索与指定车辆身份相同的车辆图像,对于交通治安人员搜索特定车辆、跨视图车辆跟踪和车辆行为分析等应用具有重要作用。当前车辆重识别研究主要基于道路监控相机进行,在地域限制和灵活性方面具有一定局限性,相比较之下,无人机机载相机平台由于具有极高的自由度,在车辆重识别领域具有重
计算机视觉和自然语言处理是人工智能领域的研究热点,在实际的生产生活中有着广泛的应用,比如人脸识别、机器翻译等技术。随着深度神经网络研究的深入,尤其是卷积神经网络在计算机视觉领域以及循环神经网络在自然语言处理领域取得了重大的突破,很多结合计算机视觉以及自然语言处理的任务如视频语义描述等为人机交互提供了更多的可能性。近年来,结合了上述两种任务的基于文字描述的单目标跟踪任务,其研究也受到了广泛地关注,但
学位
船舶在交通运输系统中占据着十分重要的地位,近年来随着通信技术的发展,航运业以及现代造船业也正在向着网络化、智能化的方向迈进。船舶的安全航行、规范管理的重要性也显得日益突出,这对船舶的数据监测系统提出了更高的要求。本文以船联网技术为基础,探索了通信技术在船舶远程数据监测领域应用,设计实现了基于船联网的远程数据监测系统,打破了不同船舶、不同设备之间信息互通难、数据保存难的局面。针对船端设计了船载信息采
现阶段我国面临着隧道工程建设需求扩张与盾构机产能不足的矛盾。刀盘作为盾构机开挖掘进的核心部件,对工程质量的稳定性起着决定性作用。但是刀盘焊接车间仍采用传统的人工焊接方式,这不仅存在着焊接效率低、焊接一致性差的问题,还会对焊接工人的健康造成损害,且焊接车间尚未应用现代化的信息管理系统,因此升级刀盘的焊接技术与监管手段具有重要意义。  本文来源于山东省重大科技创新项目,针对刀盘焊接过程中智能、柔性化不
学位
随着当代医疗技术的不断提高,外科手术已经迈入革命性的时代,正向着微创化、数字化及智能化方向转变。计算机辅助手术作为数字化微创外科手术革命的初始已经广泛活跃在外科治疗的前沿领域,同时手术工具检测和手术流程识别分别是计算机辅助手术领域重要的研究课题。在计算机辅助的微创手术系统中,手术工具检测算法可以为医生或者辅助机器人提供准确、实时的信息,例如轨迹、位置信息等,然后帮助外科医生制定最佳的手术规划或者提