基于深度学习的图像合成技术研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:Colo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像合成技术是在输入图像中抠取指定目标并融合至新图像的一种计算机技术,其研究具有一定的实际意义。传统的图像合成方法主要基于图像的颜色信息与先验知识进行研究,从而带来局限性,无法满足复杂应用需求。而深度学习方法通过卷积神经网络结构,学习高级语义特征,有助于克服传统方法的缺陷与瓶颈。本论文采用深度学习策略对图像合成问题进行研究,提供了基于深度学习的有效解決方案。论文中研究了图像合成的关键技术,着重探索了三个方面的问题:前景目标抠取策略,背景图像补全算法以及前景与背景的融合策略。首先,在前景抠取策略中,建立了低分辨率与高分辨率结合的深度学习架构,解决了数据集质量不均的问题,并定义了合理的网络结构与损失函数,以确保深度学习模型的质量和性能。通过自然图像与合成图像混合数据集的建立,解决了数据集匮乏的问题。所提出的图像抠取算法避免了传统问题研究的三分图输入的条件限制,实现了对前景目标的自动抠取,能够获得较为精细的图像抠取结果。其次,在背景补全算法中,设计了两阶段的图像补全策略,包括语义补全阶段及真实感增强阶段。在语义补全网络中,设计了有效的内容损失函数,保证了样本贡献的一致性;而在真实感增强网络中,使用初步补全结果作为输入,减少了输入中无用信息的影响,结合内容损失与对抗损失定义了合理的损失函数,确保最终补全结果具有真实感。实现了对任意大小、任意形状缺失区域的补全功能,能够得到符合语义、具有真实感细节的补全结果。此外,探索了前景与背景图像融合的策略,提出了一种无监督式的图像融合方法,设计了基于Lab颜色空间的图像融合策略,实现了前景色调的保留,并使用生成器-对抗器结构的深度学习模型对图像的明度通道进行预测,保证了融合区域的明暗一致性。设计了一种梯度损失项,并利用复合损失函数对网络训练进行控制,保留了融合后前景部分的固有语义信息,获得了具有真实感与明暗一致性的融合效果。总之,论文通过对前景抠取算法,背景补全算法及前景与背景图像融合策略关键技术的探索,为图像合成技术研究提供了基于深度学习的解决方案,具有一定的借鉴意义和价值。
其他文献
以色列技术学院机械工程系和海法卢瑟贝瑞技术研究所的科学家,利用从牛血中提取的天然蛋白,制成一种可用来生产新一代医用缝合线和绷带的纤维。
频繁的地震爆发给我们带来了巨大的损失,地震无时不刻威胁着我们的生命安全和财产安全,地震的不可预知性和强大的破坏性使得我们的抗震工作重心应该放在预防上。桥梁作为交通枢
【正】场地成本场地成本(site cost)这个说法比土地成本(land cost)要好。土地成本指的是准备为项目所用的原始土地。场地成本指的是项目所需的土地和所有基础设施要素。一个
新媒体是在新的技术支撑体系下出现的媒体形态,其主要运用工具有手机、移动电脑、数字电视等。随着科技的发展,新媒体技术也在快速发展,并已经成为人们生活中的一部分。新媒
春秋战国是奴隶社会从繁盛走向瓦解的重要时期,也是中国古代思想文化发展最为繁盛的阶段之一,礼制式微,俗乐繁盛,流派并出,百家争鸣。春秋战国时期音乐经济之“生产”活动具有鲜明
采用ANSYS/LS-DYNA软件模拟八辊复合矫直机水平矫直60kg/m重轨过程。重轨矫直过程中,纵向应力在轨头处最大,轨底处次之,轨腰中性轴处最小。轨头、轨底和轨腰处单元高度方向应
郴州市汝城县地处湘、粤、赣三省交界处.县境内湖库塘堰星罗棋布.河流沟渠纵横交错。素有“鸡鸣三省、水注三江”之美称。全县面积2400km2.辖19个乡镇,人口40万。县境内水系资源
很多植物病原菌严重地损害植物的生长和繁殖。植物与病原体协同进化过程中,也逐渐形成了一系列复杂高效的保护机制来抵御病原物的侵染。植物中抵抗外界微生物刺激所形成的系统
'全球化'概念在国际政治学界一直存在着争议,自由主义学者认为全球化预示着国际化、新的社会分工及其加剧上述进程的竞争环境;现实主义学派则认为,全球化带来世界范
<正> 仿无洞贝(Atrypoidea Mitchell et Dun,1920=Atrypella Kozlowski,1929)属于光滑的无洞贝族,广泛分布于中、上志留统。过去,它多见于大洋洲、北美洲和欧洲,中亚亦有报道