面向感知评价与轻量化的深度超分模型研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:cheng1129
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单帧图像超分辨率重建旨在从一张低分辨率图像重建出相应的高分辨率图像,要求在增加像素点的同时提升清晰度。图像超分在高清电视、历史资料恢复、压缩传输、安防监控、医疗诊断等方面有着广泛的应用。伴随着卷积神经网络的兴起以及计算资源性能的提升,深度图像超分不管是在客观指标,还是视觉效果方面都取得了空前的研究进展,并且在很大程度上超越了传统重建算法。与此同时,如何在图像主观效果与客观指标之间保持平衡,如何设计高重建精度的轻量化网络,如何提升模型的泛化性,仍然是目前的研究难点。本文将围绕目前深度图像超分中感知失真不平衡、网络深度宽度增加带来计算复杂性高显存消耗大、以及在合成数据集上训练的模型在非双三次降质数据集上泛化能力差等难点展开相关研究,主要创新点如下:第一,提出了一种面向感知失真平衡的软阈值融合的双分支深度模型。针对基于客观指标的超分算法和基于感知的超分算法之间存在评估不平衡的问题,本文提出基于软阈值融合的双分支超分网络。为了在超分图像的主观评估和客观指标之间保持更好的平衡,设计了残差记忆网络和权重感知超分网络,以此得到两种不同偏向的超分结果。然后,通过软阈值函数将两者进行融合,从而使得主观评估和客观指标折衷。并且只需单一阈值调整即可获得中间的平衡结果,无需另外训练相应的模型,同时还能一定程度上减少噪声。在公开超分基准数据集上的实验结果表明,对于4倍放大因子,该方法可实现与其他超分算法可比的感知结果。第二,提出了一种基于格型模块的格型轻量化超分网络。针对如何设计轻量级超分网络的问题,提出了一种经济的结构,能够自适应的组合残差块以形成轻量级的超分模型。受格型滤波器的启发,其具有实现两个信号之间多种线性组合的拓扑结构。由此设计了格型模块,通过应用两个蝶形结构来连接两个残差块,并且采用可学习的组合系数来表示两个残差块的多种组合模式。该格型模块可被替换到任意以残差块作为基本映射模块的超分网络中,以接近减少一半的参数量和计算量实现相当的性能。此外,基于格型模块,本文构建了一个轻量级超分网络LatticeNet,其中采用反向顺序级联策略来整合不同感受野的上下文信息。在公开超分数据集上的实验结果表明,本文方法可以实现更高的重建精度,同时保持相对较低的计算量和显存需求。第三,提出了一种基于域自适应的超分重建方法。针对在合成数据集上训练的超分模型在非双三次降质数据集上泛化能力差的问题,引入域自适应机制。现有深度超分模型虽然能从大量合成数据集中学习到强大的表示和映射关系,但仍无法很好地适应输入数据分布的变化。通过借助CORAL损失,对齐源域和目标域特征分布的二阶统计量。在轻量级网络LatticeNet基础上,利用域自适应机制,使得训练集和测试集的域差异减小,从而补偿由于域偏移引起的性能下降。
其他文献
个人所得税递延型商业养老保险将商业养老保险与税收优惠政策结合,在缓解国家养老保障财政支出压力,完善三支柱养老保障体系,满足人民群众商业养老保险需求方面发挥了重要作用。我国2018年开始个人所得税递延型养老保险试点,但个税递延型养老保险的发展状况大大低于预期。个税递延型养老保险的覆盖面较低,养老金替代率不足,其提高居民保障水平的功能没有发挥出来,仍需根据我国实际运行情况继续完善,做到与时俱进。本文首
高质量的磁共振波谱信号可以有助于研究者们有效准确地获得丰富的分子结构信息。但实验中获得的磁共振信号往往存在着许多干扰因素,如相位失真以及噪声等等,均会影响谱图质量。想要获得理想吸收线型谱图,需要对采集的磁共振信号进行预处理。自动化的预处理方式可以避免费时费力的人工操作,并有效的获得理想吸收线型谱。另一方面,在分析的样品过于复杂的情况下,获取的谱图常存在谱峰重叠、分辨率低等问题,因此如何合理简化核磁
当前中国企业积极践行国家“走出去”的战略,不断加快投资步伐,以更加积极的姿态参与国际经贸活动。在企业对外直接投资的过程中,东道国投资环境以及两国政治关系是企业必须考量的关键要素。国家风险水平是否会影响企业对外直接投资规模大小与投资成败?双边政治关系是否有助于缓解东道国投资环境的不确定性,促进企业对外投资?本文基于“中国全球投资追踪”数据库2005—2017年的企业对外直接投资数据,通过主成分分析方
表面缺陷检测是工业生产的重要组成部分,对工业产品的质量把控有重大影响。而人工检测方法效率较低,传统的机器视觉检测方法鲁棒性低,开发成本高,基于深度学习的检测方法成为当前的研究热点。实际应用中的表面缺陷存在形态复杂多变、尺度变化大、对比度低等问题,同时受噪声干扰及工业生产严格的要求等因素制约,使得基于深度学习的检测方法依然在网络检测速度和性能方面存在很大挑战。针对上述问题,本文提出了一种基于Dens
研究背景:诱导多能干细胞(iPSC)因避免了 ESC来源稀少、免疫排斥、及伦理学争议等问题,因此在疾病模拟、药物筛选、治疗等方面具有广泛的应用价值。但是,体细胞重编程仍存在研究瓶颈:1)重编程效率低,2)重编程机制不清楚,3)iPSC的制备价格昂贵,4)ESC培养基(E8)价格昂贵及bFGF组分不稳定等缺陷限制了iPSC在临床的应用。小分子化合物具有提高重编程效率、替代重编程因子、准确的靶向性等优
道路灰尘是城市环境系统重要的组成部分,其污染状况与城市水、土壤、大气等生态环境质量以及人体健康具有重要的联系。厦门市、漳州市和泉州市是福建省重要的经济发展区域,称为“闽三角”。本研究分别采集了厦门市、漳州市和泉州市道路的地表灰尘,共获得有效样品257个。通过以厦门岛道路灰尘作为闽三角城区代表,以厦门岛外、漳州市和泉州市的采样区域作为闽三角的城郊代表,分析道路地表灰尘的重金属含量特征、磁学特征,评价
本论文题目为《禅文化与禅修空间的互文性——厦门佛心寺禅修中心设计研究》,文章立足于互文性理论之上,梳理了禅文化与禅修空间之间的关系,论证了禅文化与禅修空间之间存在互文性。并在建筑语言环境内,进一步阐述实践设计中禅文化互文性的体现。本论文所要关注的禅文化集中在经典、诗歌、公案、绘画、音乐等一系列具有传统传播作用的世俗性与宗教性共生的文化范式上,而关注的禅修空间则作为跳出传统表现,跨越精神现象,物化文
晚更新世时期全球的海岸带广泛发育了风吹沙丘,这些海岸沙丘的形成与古气候、古地理环境的演变息息相关。老红砂是我国东南沿海广泛分布的一种棕红色、红色或橙黄色半胶结的中细砂沉积物,大多分布于今海平面以上0-40m高度植被覆盖区的前缘位置,形成于晚更新世,与北方黄土共同构成了覆盖我国地表的两大典型第四纪松散沉积物。老红砂的发育与东亚季风的演化、海平面变化等表生地质过程密切相关。因此,东南海岸带老红砂是晚更
137Cs是核设施的裂变产物之一,半衰期为30.17年,裂变产额为5.9%,被认为是生物学上最危险的放射性核素之一。铯的生物学行为与钾类似,通过竞争K+通道进入食物链威胁人体健康,并对生态环境造成污染。目前用于修复环境中放射性核素铯污染的常规方法效果欠佳且成本高,微生物修复技术以成本低、效果明显且不易产生二次污染的优点进入国内外研究学者的视野。本研究从海洋沉积物中富集筛选出一株耐受高浓度铯的海洋细
科技的进步给我们带来了更美好的生活,而现实生活的需求又使科技有了更强大的发展动力。人工智能已经体现在了生活的方方面面,给人们带来了前所未有的交互式体验。人体行为识别是跟生活联系非常紧密的一项研究,也是人工智能一个重要的领域。对获取的人体完整3D视觉数据进行深入分析是机器学习和模式识别领域的前沿研究主题。行为识别的两个重要研究方向,一个是如何提取更具鲁棒性区别性的特征,另一个是对获取的特征如何更好的