基于变换域统计特征的图像融合方法研究

来源 :江南大学 | 被引量 : 0次 | 上传用户:yykk110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像融合是将在同一场景下,通过不同传感器获得的图像综合成一幅新的图像,使得融合图像具有更丰富的细节信息,对场景内的所有物体都能够清晰的识别,从而便于后续进一步的图像处理和分析。随着对图像融合领域的深入研究,图像处理的手段越来越丰富。以曲波变换、轮廓波变换、剪切波变换、非下采样剪切波变换(Non-Subsampled Shearlet Transform,NSST)等为例的多尺度变换工具能够对图像进行多尺度分解,在多尺度分解层中提取显著特征,提高特征提取的准确性。NSST变换具有良好的多分辨分析特性和多向异性,能够满足不同的尺度和方向需求,具有良好的应用前景。研究发现多尺度系数间存在相关关系,利用统计模型可以得到系数的精确表示,提高图像融合的质量。所以,研究图像多尺度分解系数的统计相关性,建立统计模型,提取变换域统计特征进行图像融合,具有重要的研究价值和理论意义。本文对提取更精确的变换域统计特征进行深入的探索,并将其应用到图像融合中。本文的研究内容如下:(1)针对传统的上下文隐马尔可夫模型(Contextual Hidden Markov Model,CHMM)仅将系数分为两个状态,得到粗糙的建模结果的问题,提出了一种基于多状态上下文隐马尔可夫模型(multi-state contextual hidden Markov model,MCHMM)的图像融合方法。通过多状态对应着系数不同级别的细节度,设计了一个软上下文变量从上下文的角度准确地描述系数的细节性,利用多状态零均值的高斯混合模型(Gaussian mixture model,GMM)来表征高频子带系数分布,在高频系数上建立MCHMM模型。该方法提高了模型的细粒度,能够更精确的表示图像。实验结果表明,所提算法能够取得高质量的融合图像。(2)CHMM模型还存在建模不精确的问题,不恰当的参数设置会降低模型的表达能力,导致融合图像不理想。因此,提出了基于区间二型模糊集上下文隐马尔可夫模型(interval type-2 fuzzy set contextual hidden Markov model,T2-FCHMM)的多模态图像融合方法。利用区间二型模糊集来评估CHMM模型的不确定性,建立T2-FCHMM模型,并引入模糊熵评价T2-FCHMM的模糊性,提高了模型泛化能力和鲁棒性。基于模型统计特征与高频子带区域能量得到高频系数的活动测度指导融合。低频子带基于区域能量和方差自适应加权融合,能够较好的保持源图像的对比度。实验结果表明,所提算法在主观视觉感受和客观评价上都取得了良好的效果。(3)针对上述CHMM模型上下文设计仅针对单个系数进行计算,没有考虑到局部甚至全局系数的影响的问题,提出了一种基于多输入细胞神经网络(multi-input cellular neural network,MCNN)的CHMM模型并用于图像融合。利用MCNN的动态传播效应得到全局优化的上下文变量,并通过网络的迭代循环进一步提高特征提取的准确性和鲁棒性。然后在高频系数上建立CHMM模型,基于系数的细节性采用加权的融合规则得到高频融合子带,低频子带采用基于区域能量取大的融合规则。通过实验检验了该方法的有效性。(4)上述方法仅针对单一源图像各自建模,没有考虑源图像之间的相关属性。因此,提出了基于细胞神经网络(cellular neural network,CNN)多特征相似性的图像融合方法。通过提取图像系数的区域能量、区域方差和CHMM统计特征的多特征表示,克服单一特征不能准确的解释图像的问题。计算上述多特征相似性,用于衡量两幅图像之间的细节信息差异度,有助于提高融合图像的准确性和可靠性。利用CNN网络得到二值化的多特征综合相似性结果对图像的信息冗余和互补区域进行分割,对不同属性的区域采用不同的融合策略,提高融合图像的清晰度。实验结果表明,本文所提算法具有优越的融合性能。
其他文献
目的:靶向脂质代谢关键酶研发抗乳腺癌药物已经成为近年来乳腺癌药理学研究的热点。硬脂酰辅酶A去饱和酶1(stearoyl-CoA desaturase 1,SCD-1)是催化饱和脂肪酸(saturated fatty acid,SFA)生成单不饱和脂肪酸(monounsaturated fatty acid,MUFA)的关键酶,与乳腺癌的进展和预后密切相关,为乳腺癌潜在的治疗靶点。现有的SCD-1抑
纺织品是日常使用及消耗较多的日用品之一,每年都有大量的纺织品被消耗。存在缺陷的纺织品,其价格和使用体验都会受到较大的影响。目前,国内纺织品缺陷检测主要是由人工完成,然而人工检测存在测速度慢、可靠性低和易受主观因素影响等问题。基于机器视觉的缺陷检测方法恰好能有效解决这些问题,故本文针对基于机器视觉的网孔织物缺陷检测系统进行了研究,主要研究内容包含:(1)网孔织物缺陷检测系统搭建。为了保证检测系统采集
目的:放射治疗(Radiotherapy,RT)是癌症的主要治疗方法之一,在肝细胞癌(hepatocellular carcinoma,HCC)的治疗中具有重要地位。有研究发现,亚致死剂量照射可以促进后代存活肿瘤细胞的侵袭和转移,其机理可能与肿瘤微环境密切相关。因此,我们研究了亚致死剂量照射后HCC中肝非实质细胞(non-parenchyma cells,NPCs)对HCC细胞转移能力的影响及其机
甲状腺未分化癌(Anaplastic thyroid carcinoma,ATC)是甲状腺癌中恶性程度最高的病理亚型,因其抵抗凋亡和DNA损伤,导致化疗药物对ATC患者无效。同时,由于在发展过程中的逐步失分化,ATC细胞中碘代谢基因发生异常甲基化而表达降低,几乎完全丧失了摄取放射性碘的能力,导致ATC患者对放疗不敏感。在基础和临床研究中,诱导肿瘤细胞发生死亡和重分化是治疗ATC的重要机制。食物成分
高性能、低功耗、高可靠已成为微处理器的发展趋势。一方面,高性能始终是微处理器设计的主要研究方向;另一方面,低功耗和高可靠设计方法会对微处理器造成一定的性能损失,如何以更少的时序代价实现低功耗和高可靠设计,也成为了微处理设计中的关键问题。近年来,开源免费的RISC-V指令集受到了学界和业界的广泛关注。研究面向RISC-V微处理器的性能优化方法,具有重要的工程实践意义。本文以基于RISC-V指令集的R
背景:结直肠癌(CRC)是人类常见的消化道恶性肿瘤,每年都有较高的发病率和病死率,特别是在中国,随着人民生活水平的提高,饮食结构发生了重大变化,CRC的发病率呈逐年上升趋势,严重损害患者的健康与生命。共刺激分子B7-H3是免疫检查点蛋白之一,在多种肿瘤类型组织中广泛过表达,与患者不良预后相关。吡咯-5-羧酸还原酶1(PYCR1)是一种线粒体酶,也是参与脯氨酸合成的关键酶,研究显示其在CRC患者组织
高脂饮食是前列腺癌发展的重要危险因素。棕榈酸是膳食脂肪酸中最常见的饱和脂肪酸,也是脂肪酸合成酶(Fatty acid synthase,FASN)的主要终产物。已有许多研究表明,FASN在多种癌症中呈高表达,而FASN表达水平的增高会导致体内合成脂肪酸增多。有研究报道称,肿瘤细胞的增殖依赖于内源性的脂肪酸合成。然而,富含棕榈酸饮食对前列腺癌发生发展的影响少有报道。因此,本文旨在研究富含棕榈酸饮食在
计算机视觉是计算机领域研究的重要分支,一直以来倍受学者、专家关注。其中机器视觉中的单目标跟踪方向,由于其在实际生活中被广泛应用,一直以来成为被研究的热点。目标跟踪任务因其跟踪的目标本身的不确定性以及其跟踪环境的复杂性,会面对诸如目标遮挡、尺寸变化、运动模糊以及长时间跟踪等问题。因其应用场景的复杂性,这就要求跟踪算法有较强的环境适应能力,即良好的鲁棒性。本文针对目标跟踪面对的难题,提出一系列的解决方
随着社会各方的需求、信息化的推进以及计算机视觉的发展,微表情识别领域得到了越来越多的关注,研究人员对其所进行的研究越来越深入。在商务谈判、刑事审讯、心理治疗等场合中人们会有意无意的隐藏自己的真实情绪以此来达到他们的目的,微表情是人类的肌肉语言,在此类情况下使用微表情识别的结果作为判断依据,可靠性则会大大提升。微表情区别于寻常宏表情的显著特点:(1)持续时间短(1/25-1/5秒);(2)肌肉运动幅
视觉目标跟踪是计算机视觉领域的一个重要分支,在智能视频监控、无人驾驶、人机交互等多个领域有着重要应用。本课题的研究内容是单目标跟踪,表现形式为在第一帧提供待跟踪的任意单个物体,在接下来的图像序列中,跟踪算法应当准确、实时地预测目标的位置。由于第一帧提供的信息有限,不足以应对后续跟踪场景的复杂性与多变性,同时,跟踪器的速度要满足实时性,这些难点使得视觉目标跟踪一直是一个极具挑战性的任务。如何设计一个