【摘 要】
:
智能裁剪通过对原始图像进行裁剪的方式来生成美学质量更高的图像。随着手机拍照的普及,智能裁剪任务已经拥有了大量的潜在用户,相关的研究也取得了很大进展,但在裁剪算法投入大规模应用之前,还有一些问题亟待解决。本文从实用性的角度出发,分别针对提取裁剪子图间关系、融合显著信息、提升智能裁剪模型在无标签目标域中的泛化能力三个问题开展了研究。首先,本文研究了裁剪子图间的关系,指出裁剪子图间存在美学质量关联和空间
论文部分内容阅读
智能裁剪通过对原始图像进行裁剪的方式来生成美学质量更高的图像。随着手机拍照的普及,智能裁剪任务已经拥有了大量的潜在用户,相关的研究也取得了很大进展,但在裁剪算法投入大规模应用之前,还有一些问题亟待解决。本文从实用性的角度出发,分别针对提取裁剪子图间关系、融合显著信息、提升智能裁剪模型在无标签目标域中的泛化能力三个问题开展了研究。首先,本文研究了裁剪子图间的关系,指出裁剪子图间存在美学质量关联和空间位置关联。本文通过两个图卷积结构分别提取裁剪子图间的美学关联特征和空间关联特征,并构建了基于训练样本裁剪子图美学评分的美学关联矩阵与基于训练样本裁剪子图空间位置的空间关联矩阵作为两个图卷积邻接矩阵的监督。而后,本文将原始图像全局特征根据裁剪子图重采样生成的区域特征与前面提取的关联特征相结合,用于预测裁剪子图的美学评分,实验证明裁剪子图间的美学和空间关联信息有助于智能裁剪模型找到美学质量更高的裁剪结果。其次,本文将显著性信息融合到裁剪模型中,辅助模型理解原始图像中的重要区域,进而提升裁剪模型的综合性能。区别于现有智能裁剪算法的融合形式,本文提出了将显著性信息作为输入和监督的两种融合模式,其中将显著性信息作为输入时尝试了三种融合显著性特征和美学特征的方案。通过实验,本文找出了更适合于裁剪任务的特征融合方案,即注意力图加权融合方案,并验证了该方案的有效性。之后,本文将显著性信息与裁剪子图间关联信息相结合,进一步提升了有监督情况下智能裁剪算法在GAICD数据集上的裁剪效果。最后,本文指出了有监督智能裁剪模型在跨域时性能下降的问题,并通过实验证实了裁剪任务中存在的域偏移问题。本文进而设计了一种基于对抗域适应的裁剪算法,通过域判别器来辨别样本来自哪个域,然后将目标域样本的梯度反转,使特征提取器学习到混淆源域和目标域样本的能力,对齐目标域和源域数据的样本分布。此外,本文采用参数不同的美学评分器辅助提取了基于裁剪任务的不变特征。在跨数据集和跨场景域上的实验证明了本文算法能有效提升裁剪模型在无标签目标域上的泛化能力。智能裁剪算法可以高效便捷的替代人工裁剪操作,具有巨大的潜在应用市场,本文也站在实用性的角度,分析了当前智能裁剪算法存在的问题并提出了相应的解决方案。本文从裁剪子图间相关性和融合显著信息这两个问题出发,设计相应策略,增强了智能裁剪模型在有监督情况下的性能,强化了裁剪算法生成高美学质量图像的能力。考虑到智能裁剪中的域偏移问题,本文进一步设计了域适应策略提升了裁剪模型在无标签场景下的泛化能力。
其他文献
目的:近年研究发现,氧化应激引起的视网膜神经退行性改变是糖尿病视网膜病变的病理改变之一。白藜芦醇(Resveratrol,RSV)是一种具有广泛药理作用的多元酚类化合物,在其他神经退行性疾病中,具有抗氧化,延缓衰老,减轻炎症等保护作用,但在糖尿病视网膜神经元病变中的治疗效果并未得到充分阐述。本研究目的是探究白藜芦醇对于糖尿病视网膜神经退行性病变的治疗作用以及保护机制。方法:(1)通过链脲佐菌素(S
钢丝绳在长期使用过程中会出现磨损和断丝等缺陷,钢丝绳漏磁无损检测技术被广泛应用于钢丝绳检测。目前现有的钢丝绳漏磁探测提离距离很小(2 mm-5 mm),结合磁敏元件装配工艺结构体的厚度,传感器内腔直接贴合被检钢丝绳,这种贴合式的探测工艺导致钢丝绳漏磁检测传感器在检测过程中会刮去钢丝绳表面油污,甚至被钢丝绳表面翘丝卡住。所以,实现钢丝绳漏磁检测传感器在大提离(>30 mm)下的检测钢丝绳非常重要。首
近年来,计算机技术的迅速发展使得深度神经网络在人工智能领域得到广泛应用。同时,智能终端的普及和第五代移动通信技术5G的发展,也使得图片、视频等数据的获取变得更加容易,以大数据为驱动的人工智能技术应用场景得到进一步拓展。因此,根据不同应用场景设计高性能的深度神经网络具有现实意义。深度神经网络性能的评价指标包括准确率、计算量、参数量和推理速度等。影响深度神经网络性能的关键因素:一是神经网络结构的设计,
华中科技大学自由电子激光太赫兹源(HUST FEL-THz源)具有高功率、波长可调谐、高分辨率以及高灵敏度等优点,适用于太赫兹时域光谱技术(THz-TDS)的应用研究。而传统的太赫兹时域光谱系统受限于环境噪声、电光采样过程中飞秒激光与THz脉冲的相位失配和晶体色散效应的影响,会导致输出THz时域波形发生失真和电光信号幅值降低等问题。针对上述问题,本文从测量系统和实验系统两个方面对实验室已有的太赫兹
超材料是一种具有特殊性质的人造材料,它们通常具有天然材料所不具备的超常物理性质或更优良的工作性能,这些性质主要来自于人工设计的亚波长结构。人造结构单元的排布方式、形状及尺寸都会影响其电磁响应特性。而手性超材料利用手性结构的特殊性可实现特殊的功能,通常针对电磁波的圆偏振分量进行调控。本文围绕手性结构的电磁超材料进行研究,主要包括两个方面的工作:第一个是手性超材料的旋光效应与类电磁感应透明的研究;第二
随着电子商务的发展,叠加疫情让没有网购经验的用户从线下转移到线上,农产品电商渠道销售占比不断增长。劳动力从农村向城镇转移推动了城镇经济的发展,却使得农村劳动力缺乏,加上农业发展的不稳定性,使得农户害怕从事农业承担风险,造成农村土地出现大量荒废情况。我国农村贫困人口全部脱贫摘帽,然而,对于脱贫地区而言,在自然条件、人力资源、产销路径等方面都较为脆弱,发展具有不稳定性,返贫现象时有发生。农产品电商可以
目的:建立嗜中性粒细胞哮喘和嗜酸性粒细胞哮喘小鼠模型,研究Il-25对巨噬细胞M1极化、Il-12、Il-23表达以及嗜中性粒细胞哮喘模型气道炎症的影响。方法:6到8周龄的雌性C57BL、6J小鼠,分为4组(n=6-8),分别是嗜中性粒细胞哮喘组(OVA/LPS组)、嗜酸性粒细胞哮喘组(OVA组)、嗜中性粒细胞哮喘+Il-25组(OVA/LPS/Il-25组)和对照组。小鼠肺功能检测不同组小鼠气道
Si3N4陶瓷具有耐高温、高强度等优良性能,在航空、机械、生物医疗等高新领域发挥着越来越重要的作用。但传统的制备方法受限于模具难以成形复杂结构,一定程度上限制了Si3N4陶瓷的发展和应用。虽然数字光处理技术(Digital light processing,DLP)可以实现复杂结构陶瓷零件的成形,但是由于Si3N4粉体具有高折射率和高紫外光吸收率等性质,故难以通过DLP成形。本文以包覆助烧剂后Si
目的:CDC73(cell division cycle 73 gene)一直作为抑癌基因被广泛研究,但是越来越多的研究结果显示,CDC73在一定环境下也可以转换成癌基因发挥作用,与肿瘤的发生发展密切相关,但其在脑胶质瘤的研究尚未见报道。本研究利用CDC73在胶质瘤组织及胶质母细胞瘤(glioblastoma,GBM)细胞系初步验证CDC73的表达情况,根据临床随访信息分析其表达与胶质瘤患者临床病
铝合金牺牲阳极具有密度小、理论电容量高、导电率高、廉价易得、寿命长等特点,目前已被广泛应用于各工业领域。但是在一些特殊的介质环境中,如:高温高压井下环境、高压低温深海环境以及高温常压介质环境等,铝合金牺牲阳极存在自腐蚀过快、使用寿命缩短和电流效率低下等问题。目前对这些特殊介质中铝合金牺牲阳极电化学行为的变化规律和机制都不清楚,这已经阻碍了特殊介质中牺牲阳极材料的应用以及新材料的开发。因此,研究相关