图像到草图的跨域生成及其在图像检索中的应用

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:liuyunvc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自远古时期起,人们就开始使用草图这种简单便捷且高效的信息表达方式进行信息传递。在今天的日常生活交流中,也常见到人们借助草图来直观地传递和表达自己的想法,且这一现象随着触屏智能设备的大量普及越来越常见。作为重要的信息传递媒介,草图由于其自身所固有的多样性、随机性以及抽象性,使得对于人类来说很容易完成的草图绘制对于机器来说却十分困难。除此之外,相关数据集收集难度大、收集成本高,使得草图数据集尤其是图像-草图对数据集数量少、数据量小,在一定程度上限制了相关研究的发展。本文致力于研究一种无监督的深度学习算法,用于从真实图像生成笔画级别的草图。一方面,无监督的训练方式可以一定程度上解决图像-草图对数据集数据量不足、数据收集成本高的困难;另一方面,笔画级别的生成模式使得生成的草图仍然保留有重要的笔顺信息,对于扩充相关数据集具有重要意义。此外,图像到草图的跨域生成算法需要计算机学会模仿人类理解图像的方式来完成一个跨模态的生成任务,因此本文的研究对于草图识别、草图语义分割等相关领域,甚至是其他跨域的生成算法研究都具有启发式的意义。本文所做的主要工作有如下几个方面:首先,本文提出了 一种无监督的图像到草图跨域生成模型,创新性地将图像到图像风格转换问题的基本思想应用于解决图像到草图的生成问题,针对图像和草图域间距离大的问题提出了解决方案,对模型结构进行了改进;其次,本文实现了由包含空间信息的图像到包含时序信息的笔画级草图的转换,分析并解决了由于跨模态所带来的生成结果不对齐的问题;接着,本文对模型进行了进一步的改进,使得模型能够同时兼容单类别和多类别的草图生成任务;最后,本文将图像到草图的生成模型应用到了实际的图像检索当中,实现了一个可视化的基于草图的图像检索应用。
其他文献
目的:通过比较艾拉莫德联合来氟米特与甲氨蝶呤联合来氟米特及来氟米特单药治疗老年类风湿关节炎(elderly onset rheumatoid arthritis,EORA)的疗效,评估艾拉莫德联合来氟米特治疗EORA的临床效果,并进一步分析其联合用药的安全性。方法:采用随机、单盲的实验方法。选取2017年1月至2019年9月期间在右江民族医学院附属医院血液风湿科门诊及住院治疗的EORA 180例(
随着物联网设备的飞速发展与广泛应用,物联网设备的安全性问题也日益凸显。然而物联网设备硬件资源受限,硬件架构复杂,增加了分析模块的适配难度,使得通用的漏洞挖掘技术不完全适用于物联网设备。现有的模糊测试框架一方面难以监控物联网设备中的模糊测试对象的运行状态,另一方面难以取得物联网设备中的运行时信息。给物联网设备应用的模糊测试带来了 一定的困难。本文在分析现有物联网设备漏洞挖掘技术的基础上,研究了针对A
随着海洋开发与海洋经济的发展,船舶活动带来的海洋溢油污染日趋严重。每年流入海洋环境中大量的石油类污染物,给人类健康安全、海洋环境和海洋经济都带来了巨大的伤害。海洋溢油数据采集及预处理是溢油扩散分析的前提,溢油扩散轨迹的分析与预测是溢油事故处理和决策的基础。将溢油数据采集与溢油预测技术两者综合应用,可以为溢油应急反应决策提供及时有效的信息支持,增强船舶溢油决策的科学性。本文以提高船舶海洋溢油应急能力
我国西南地区水电资源丰富,电解铝企业陆续入驻云南各地州,自2016年电解铝废渣被环保部纳入《国家危险废物名录》以来,诸多电解铝企业面临危废渣库建设选址及地下水环境影响评估问题,而这些电解铝企业的危废渣库填埋场对项目所在地区域地下水造成极大的污染风险。本文主要采用实验和计算相结合的方法来研究氟化物在变饱和带中的运移规律。通过研究获得以下结论:(1)采用初始阶梯浓度方式进行静态吸附结果表明,红黏土对氟
目的探讨全身磁共振弥散加权成像技术(Whole-body diffusion weighted imaging,WB-DWI)在初诊多发性骨髓瘤(Multiple myeloma,MM)患者早期诊断中的临床应用价值,以便更好的指导临床工作,为MM早期诊断提供有效的临床评估手段。方法收集2015年1月至2019年9月于本研究中心行WB-DWI检查的所有患者共105例,包括符合纳入标准的初诊MM患者6
詹尼斯·加洛韦是当代苏格兰女性先锋文学运动中重要的一员,她的小说始终围绕女性话题,真实展现出苏格兰女性的生存现状。她的小说虽采用女性视角,却没有局限于传统的女性主
宗其香先生是中国近现代艺术史上一位成绩斐然的艺术大家,他成功地将中国传统绘画中的写意与西方写实艺术表现形式有机结合了起来。在他的艺术生涯中,“江城”(指江边之城,简称“江城”)夜景题材的山水画尤其精彩,具有独特的风格面貌。本文旨在分析宗其香“江城”夜景山水画的艺术特征,并阐述了其“江城”夜景山水画对本人创作产生的影响。本文第一章介绍了宗其香的生平简历与创作历程。将他的生平简历进行了概述,创作历程对
通过功能性基因的导入纠正功能丧失或在生理水平上表达缺陷的基因成为基因治疗的主要方向。mRNA凭借无需转录过程以及细胞质内表达的特性,可以克服DNA因为细胞核孔因素干扰和CpG免疫原性导致的不同细胞间转染效果的较大差异,同时还具有安全性更高,免疫原性更低等优势。然而mRNA因为其分子量大及本身负电的特性必须借助载体穿越选择透过性的细胞膜实现功能。病毒载体凭借较高的递送效率,成为目前临床利用最多的载体
学位
在路基发生不均匀沉降后,CRTSⅢ型板式无砟轨道也会随路基的沉降而发生变形,在运营阶段,由于底座板上部大部分已被自密实混凝土和轨道板所覆盖,从表面无法准确判断底座板的裂纹状况,而当底座板出现裂纹后会严重影响整个轨道结构的使用寿命。论文以此为基础,建立CRTSⅢ型板式无砟轨道有限元模型,对底座板裂纹的萌生问题进行了如下的研究:(1)建立CRTSⅢ型板式无砟轨道有限元模型,对运营阶段影响底座板开裂的原
近年来,随着互联网的迅猛发展,社会各行业每天产生海量的各式各样的数据,数据的爆发式增长推动了大数据时代的到来,如何从海量的数据中挖掘出有用的信息,是当前研究的热点课题之一。通过数据挖掘技术来发现数据中有价值的内容越来越受到关注。聚类分析作为数据挖掘的重要组成部分,在很多领域已经得到了充分的发展与应用,但是在当前大数据时代的背景下,传统的聚类分析技术在聚类准确性以及处理效率等方面越来越难以满足人们对