基于文本标签的交互式草图生成图像研究

来源 :大连理工大学 | 被引量 : 1次 | 上传用户:nolva
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
绘画作品设计过程涉及大量创造性工作。这个过程通常以在纸上画草图开始,借此设计师和工程师分享他们的想法,创在出能够还原真实场景的艺术作品。描绘现实世界中的图像通常包含多个对象,因此,从多实例草图中生成图像是一个有吸引力的研究课题,具有更大的现实意义。此外,随着基于数据驱动的智能时代的发展,获取含有标注的数据是困难的,但获取含标注的仿真样本数据可有效弥补真实数据的不足,因此本文方案提出了一个基于标注的多类别草图生成图像的方案,为草图图像标注类别信息。一方面,能够辅助艺术从业人员的创造性工作,另一方面,解决了人工标注数据费时费力的难题。在草图生成图像的任务中,现有的生成网络通常会在一张图像的不同实例上产生相似的纹理,因为这些方法主要是学习整个图像的分布而忽略了图像中实例部分的分布。因此为了解决这一问题,本文提出了一种渐进的实例纹理保留生成方法,通过将实例和整个图像的生成过程分离,生成更加真实的图像。具体来说,本文提出了一个层级的网络结构保留实例的纹理信息。首先,第一阶段产生实例生成器,它为每一类草图生成初始的颜色分布和细节纹理,然后,第二阶段将第一阶段生成的实例图像组合作为网络输入,并且引入了全局辅助特征,从而生成了保留了实例细节纹理的完整图像。此外,例如眼睛、耳朵等是动物整体中最显著的一部分,准确的显著区域草图能够帮助生成纹理更加合理的实例图像。因此,本方案提出了判别草图扩增技术,通过获取判别区域的草图信息使得图像生成过程中具有更加准确的结构约束,并能够使生成图像对噪声具有较好的鲁棒性。大量实验表明,本文模型不仅能够生成合理的多类别图像,并且在MS-COCO数据集中获取了较高的感知分数(Inception Score)和较低的弗莱彻特距离(Fr0)?(8?0)inception distance),这意味着本文的方案在生成数据的质量和多样性上都取得了很好的结果。除此之外,本文通过收集整理相关数据构建了一个高质量的数据集,为多实例图像生成研究提供了丰富的多实例草图训练数据。同时,该数据集也适用于基于草图图像的其他研究任务,如草图分类、草图识别等。综上所述,本文的方案具有一定实际价值。
其他文献
以海南香蕉为原料,采用变温压差膨化干燥技术研制香蕉脆片,探索影响产品质量的工艺参数。考察6个单因素对膨化产品质量的影响。研究结果表明:对产品质量影响较大的因素是预干
三、比较分析 1.衡器国际建议(R)第四草案稿与前几份草案稿之间 (1)关于双轴刚性参考车辆 第四草案稿首先提出了“双轴刚性参考车辆”这一概念,在此基础上重新界定轴重和轴组重的最
目的观察甘油果糖和甘露醇序贯治疗急性创伤性脑水肿的临床疗效。方法 65例创伤性脑外伤患者随机分为A、B、C、D组。A组(18例)应用20%甘露醇250 mL静脉输注,(3-4)次/天,4 d后全部
研究用荔枝壳粉末吸附剂去除水溶液中六价铬Cr(Ⅵ)的效果,考察溶液初始pH值、吸附剂投加量、吸附时间、吸附温度的影响,并讨论吸附过程的热力学特征。结果表明,在50 m L 50.0 m
在移动雾计算中,雾节点与移动终端用户之间的通信容易受到伪装攻击,从而带来通信和数据传输的安全问题。基于移动雾环境下的物理层密钥生成策略,提出一种基于强化学习的伪装
九叶青花椒为芸香科花椒属半落叶乔木,其土壤适应性广、麻味纯正,在花椒的整个生长过程中,病、虫危害等因素严重影响和制约花椒产品的品质于质量质,因此认真对待花椒的病虫害
<正>为便于对光干涉甲烷测定器在使用中存在问题的分析与处理,必须了解测定器的光学系统,其光学系统如图1所示。由光源1发出的光线经聚光镜2和狭缝3到达平面镜4,再经平面镜的
目的探讨对原发性下肢静脉曲张患者围手术期中实施优质护理的效果。方法选取2014年5月至2016年5月收治的80例原发性下肢静脉曲张患者作为研究对象,对所有患者采取手术治疗,采取
采用机械活化方法对蔗渣进行预处理,研究其对蔗渣酶解产糖的影响。用红外光谱、X-射线衍射和扫描电镜测定预处理前后蔗渣结构及表面形态的变化,并分析其作用机理。研究结果表明