两阶段草图至图像生成模型与应用实现

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:xieqinghang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于草图的图像生成是计算机视觉中一个亟待解决的重要问题。对于手绘草图来说,不同用户对同一个对象的表达有巨大的差异,这要求算法模型能够学习草图类别内部巨大的差异。并且,草图与图像之间存在着尺度与纹理间的巨大差异,这种特征之间的鸿沟使得草图生成图像模型训练更加困难。为了填补草图与图像之间的特征鸿沟,本文提出了由草图到边缘图,再由边缘图到图像的两阶段草图生成图像模型,并应用该模型实现了基于多类别草图的图像生成系统。本文模型在第一阶段中,基于生成对抗网络模型学习从草图到图像边缘的映射,从而实现从草图到图像尺寸及结构之间的映射关系,降低从草图直接生成图像的难度;在第二阶段中,将草图和边缘图像相组合作为输入,为生成真实图像的训练提供更强的形状约束,实现从图像结构到纹理的映射。除此之外,本文引入特征之间的相关性学习,通过使用互信息正则约束与损失函数的组合了解草图数据之间的类型差异,解决多类别草图生成图像的问题,并提升原有模型的可学习性。对于基于草图的图像生成系统,本文通过虚拟DOM技术解决了在绘制草图过程中笔触线条的更改造成的高频率数据更新问题,并使用Node.js技术实现草图数据运算与管理,减少算法模型与系统间耦合程度,实现基于B/S的实时交互应用。本文提出的方法在与最先进的草图生成图像方法对比中,在精确度上获得了 5.2%的提升,尤其是在马、斑马以及长颈鹿等类别的生成任务上,整体的形状生成和细节纹理描述都具有更加出色的表现。最后,通过在真实场景下运行草图生成图像系统,验证了本文提出模型在多类别草图生成图像问题上的有效性,具有实际的应用价值。
其他文献
随着信息科技的不断发展,投稿系统对数据安全性与可靠性的要求也日益增强,传统投稿系统采用的中心化的存储方案在版权保护、匿名评审、一稿多投检测方面存在诸多漏洞。不仅会侵犯文章的版权和作者的权益,还不利于出版社的发展。区块链技术的出现为解决上述问题提供了可能,得益于其中心化的存储结构,以及其不可篡改、可溯源等特性。本文提出了基于区块链网络的文章投稿机制,运用基于属性的加密算法对文章相关信息进行处理,同时
随着近几年移动互联网及智能终端的快速普及,手机游戏也得到迅速发展的机会。而随着手游行业的不断发展,游戏产业链内出现了发行商和开发商合作的情况,称为游戏联运。游戏研发商期望第三方平台为游戏提供推广和运营服务,同时研发商能便捷迅速地接入游戏,查看游戏的推广和收入的情况。本文首先概述了所论软件的应用背景、开发意义、国内外研究现状以及相关的理论与技术基础,之后根据业务的实施流程归纳梳理出系统整体建设目标,
随着社会的进步,各个公共场所对人员的进出管理更加规范,大多公共场所的出入口均装有监控摄像头。因此,社会对针对视频的人脸识别系统的需求也大幅增加。虽然神经网络算法在人脸识别方面取得了显著突破。然而,由于神经网络算法计算量庞大,在没有GPU的支持下很难达到应有的性能。为了让人脸识别系统摆脱对GPU的依赖以及降低系统的硬件成本,人们开始研究在CPU环境下对视频信息实时、准确的人脸检测技术。2019年,谷
近年来,随着全球空气质量的下降以及新冠肺炎疫情的爆发,肺病已经成为了影响人类健康和生命安全的十大原因之一。在临床医学上,计算机断层扫描(CT)被广泛应用于肺病的诊断,然而由于CT图像的数量过多,以及放射科专家主观判断的差异,会造成误诊漏诊的可能性。因此,开发一个计算机辅助诊断系统十分必要,而肺部区域的自动分割就是其中的第一个步骤,会直接影响下一步肺病的诊断分析,所以肺部区域的高精度分割对于计算机辅
随着无线传感技术的日益发展,利用分布广泛和细粒度的Wi Fi信号实现人物的身份认证逐渐成为可能。其中,基于Wi Fi物理层的信道状态信息(Channel State Information,CSI)的人物身份认证方法备受关注。同时,由于Wi Fi信号可以穿过墙体传播,所以在穿墙场景下基于CSI的身份认证研究是一个重要的研究课题。虽然当前的基于CSI的人物身份认证研究有了很大的发展,但是主要是在非穿
在黄昏、夜晚以及阴影遮挡等复杂光照条件的影响下,成像设备所采集的图像通常存在亮度低、色彩失真等问题,导致图像视觉效果变差,退化成为低光图像,严重影响了计算机视觉系统的性能。通过对低光图像进行增强处理,能够有效改善图像质量,为高级计算机视觉任务提供优质输入,提高系统性能。因此,对低光图像增强算法的研究工作具有重要意义。本文将围绕低光图像增强展开相关的研究工作。首先,论文介绍人眼视觉成像原理、色彩恒常
城市道路交通流预测有助于相关部门对交通供求协调以及制定交通管理计划,同时也为出行者路线规划提供有利依据,也是智能交通系统ITS(Intelligent Transportation System)研究和应用的核心组成部分。然而交通流预测也是一个复杂的课题,该课题从对交通特征建模的数理统计分析到以知识发现的智能预测方法为主体的预测经历了巨大的演变,智能预测方法以大规模数据为基础、以深度学习为核心、以
放射治疗是治愈癌症的强力手段,而医生准确诊断则依赖于多种模态医学图像(如MR、CT图像等)所提供的综合信息。CT图像为制定放射剂量所必需,但其拍摄时具有辐射性,且某些情况下CT图像诊断价值并不高,另外不同医学图像间的严格配准也较为复杂和费时。因此准确高效地从MRI图像直接转换为CT图像能够为患者减轻经济、健康负担,为医生节省时间精力,具有较大的意义。目前,相对于传统方法精度和速度不足的问题,现有方
背景:生长激素具有免疫调节、促进细胞增殖及蛋白合成等生理作用,已被证实可以促进急慢性创面愈合。目的:构建过表达生长激素的脂肪干细胞系(生长激素-脂肪干细胞),并探究其对成纤维细胞增殖迁移能力的影响及其分子机制。方法:(1)体外分离并鉴定脂肪干细胞;(2)构建生长激素过表达慢病毒,将脂肪干细胞分为生长激素组、空载组、对照组,以上3组分别转染生长激素过表达慢病毒、空载慢病毒或不进行传染;(3)RT-q
随着社会的发展,海量数据在给人们带来生活便利的同时也带来了困扰。以用户购房为例,海量房源数据使用户容易陷入信息过载的泥潭,难以获取到有效数据;并且区位资源已经成为用户购房考虑的重要因素,但是用户难以将自己对于区位资源的需求同房源数据关联起来。本文针对以上用户购房时遇到的问题进行设计实现。系统由六个模块组成,分别是数据台账、查询统计、区位资源、房源推荐、房源对比和个人信息。数据台账模块展示整体房价和