基于半监督语义分割的草图着色

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:JavaProDev
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像是一种重要的信息载体,相比于无颜色的草图,彩色图像具有更丰富的视觉信息。然而,手动对图像进行着色是一个耗时耗力的过程,因此自动着色问题具有很高的研究和应用价值。近年来,许多研究人员将深度学习技术应用到了自动着色问题中,并已经实现了一些低成本、简单、快速的自动着色模型。然而,模型通常缺乏对草图中语义信息的理解,无法准确地识别出草图中的不同区域,导致自动着色的结果中容易出现颜色渗透、着色错误等问题。基于此,本文将图像的语义信息显式地引入到图像着色任务中,提出了一种基于半监督语义分割的草图着色模型。本文主要分为三个部分。第一部分介绍了图像着色的现状、研究目的与意义;第二部分针对我们研究涉及的相关理论与算法进行了介绍;第三部分提出了基于半监督语义分割的的草图着色模型,这也是本文的创新点,具体工作包括:(1)数据集的构建与标注,从彩色图像中处理得到草图,对部分数据进行语义标注,从而为半监督语义分割模型和着色模型提供训练数据;(2)利用半监督语义分割模型,获取草图的语义信息。此算法基于一致性正则化思想,具体而言,本文将Mean Teacher扩展到Deep Lab-V2模型中,通过约束模型对诱导扰动的鲁棒性实现半监督;(3)利用自动着色模型,对草图进行自动着色。此算法基于Tag2Pix模型,网络将草图、对应的语义图像和颜色标签作为输入,通过U-Net提取草图和语义图像的高维特征,并在解码过程中不断融入颜色标签信息,实现自动着色功能。实验结果表明,本文方法通过将语义信息引入到着色问题中,可以提升着色质量,缓解颜色渗透、上色错误等问题。
其他文献
本文从对比语言学的观点出发,探讨了中韩数量结构中的结合方式、意义对应关系、感情色彩等的共同点和差异点。本文以汉韩名量词和动量词为研究对象,运用对比语言学、文献研究法以及归纳分析法等理论、方法探究汉韩量词数量结构的特点。本文以21世纪世宗语料库(2011)、《韩中辞典》、《汉语量词大词典》、CCL语料库为语料对汉韩量词进行搜集、分类、对比研究。由于韩国语中存在大量汉字词,两种语言的使用存在不少共同点
学位
夜间车辆检测是智能交通领域的一项重要任务。夜间光线的不足会导致交通事故发生的概率大幅增加,也使得交通部门难以对实时交通状况进行准确监控,因而夜间车辆检测任务的研究,对于未来交通系统的先进化发展具有重要推动意义。现有的夜间检测存在夜间数据匮乏与算法针对性不足等问题。具体而言,良好的训练数据能够为算法的优越性能提供保障。然而,现有的夜间车辆数据集的数据大多光照良好,且场景单一,几乎不包含极暗情况下的样
学位
新冠肺炎爆发初期,多个国家采取非药物干预措施控制疫情传播。在这些非药物干预措施中,广泛采用隔离措施,并通过居家和就地隔离命令执行。了解隔离措施的有效性可以为正在进行的COVID-19大流行和未来疾病爆发期间的决策和控制规划提供信息。本文主要回顾了新冠肺炎疫情爆发的早期阶段,并对隔离措施的实施进行了一系列预测性研究。传染病数学建模是一种工具,可以研究疾病传播的机制、预测传染病的进展情况以及评估控制流
学位
Moment in Peking是林语堂于1938年用英文创作的中国小说,反映了从清末到抗日战争的中国历史现实,涉及到时代变迁的方方面面。小说展现的宗教哲学、风俗习惯、文学艺术等风貌弘扬了中国文化的博大精深;一些重要历史事件和历史人物的描绘在弘扬中国文化的同时向海外宣传了中国社会的动荡和抗日战争的残酷。张振玉是翻译林语堂作品数量最多,影响最广的译者之一,他的《京华烟云》不仅受到读者和出版社的喜爱,
学位
运动事件与人类感知密切相关,对于运动事件的表达与习得研究一直是国内外学者关注的重要话题。其中的研究多数以母语者为主要研究对象,探究不同语言的类型归属问题、对比语言表达的差异性以及语言类型对于语言使用者思维方式的影响。在二语研究方面,尽管近些年有关二语学习者运动事件表达的研究逐渐丰富,但关于运动事件中的方向性研究备受忽略。迄今为止,关于中国学习者如何加工运动事件中的方向性尚无明确结论。汉语和英语在方
学位
典型相关分析(CCA)的目标是提取两组随机变量之间的线性相关关系,其基本思想是最大化两个变量到低维子空间中线性投影的相关系数.然而CCA存在一定的局限性,无法提取变量间的非线性关系.核典型相关分析(KCCA)是CCA的非线性推广,现有研究大都聚焦于中心化KCCA,即数据需要在特征空间中进行中心化.在许多应用中,例如生物信息学中的基因表达、计算机视觉中的人脸识别,中心化会导致部分有趣特征信息的丢失.
学位
中韩自贸协定(FTA)是中韩双方在中韩自由贸易区谈判会上签订的具有法律约束力的契约。协定生效后,中韩双方货物贸易的自由化程度最终将超过税目的90%,有助于促进两国的经贸往来,促进地区经济繁荣。为落实两国领导人达成的重要共识,经过国务院批准,同意在山东省烟台市、江苏省盐城市、广东省惠州市分别设立中韩产业园。中韩自贸区的建设推动了中国文化市场规范化;调整中国文化产品结构;扩大了中国文化产业规模。中韩两
学位
劉瑞先生主編的《秦封泥集存》于2020年3月份出版,該書吸收了學界的最新研究成果,收集了2019年9月前刊佈的秦封泥,共計2350種9218枚,是目前研究秦封泥最全面的資料。本論文采用比較、歸納的研究方法,參照《説文解字》的體例,在《秦封泥集存》的基礎上編訂文字編。本論文分爲緒論、文字編、附録三部分。緒論部分概括了《秦封泥集存》的基本情況,總結了秦封泥的研究歷史,介紹了本論文的研究目標、材料與思路
学位
有限元方法是一种求解偏微分方程的数值计算技术,是求解各种复杂数学、物理问题的重要方法,具有计算网格的灵活性、计算程序的通用性等特点。求解时对整个问题区域进行剖分,把求解区域剖分成简单的单元。作为对真解的一种近似,在一定程度上揭示了研究对象的内在规律,为科学研究提供了强有力的指导和参考,在科学、工业、工程以及社会学科中广泛应用。三维有限元网格主要包括四面体网格和六面体网格,现在四面体网格已经有了成熟
学位
在现实的工程问题中往往会出现一些复杂的偏微分方程,而这些偏微分方程通常是没有办法求得精确解的,这时有限元方法作为一种求解偏微分方程的工具便发挥了重要的作用。在构造有限元空间时,有限元方法的收敛精度和计算量是和自由度直接相关的,因此,如何能以少的自由度达到高的收敛精度使得计算总量降低一直是国内外学者所关心的一个话题。旋转Q1元是四边形网格上最简单的非协调元,然而该元对于任意四边形网格却不收敛,目前对
学位