基于自适应回归的图像超分辨率:算法与应用

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:figo0204
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文探讨了基于自适应回归模型的图像超分辨率技术及其在数字图像通信领域的若干应用,包括图像错误隐藏和无线环境下的视频编码技术。在实际应用中,受采集设备和传输信道等条件的限制,视觉通信系统接收端获得图像的分辨率往往不能满足人们的要求。为此,我们需要使用图像超分辨率技术在保证不增加通信系统硬件负担的同时,提高图像的分辨率。图像建模是图像处理、模式识别和计算机视觉等领域中的一个基本问题,考虑人类视觉系统对图像的认知特性并且符合自然图像分布规律的数学模型能够为图像处理和识别等提供更多的先验知识,从而提高算法的处理效果。统计回归模型能够保护图像结构的二阶统计量,具有良好的边缘描述能力,符合人类视觉系统对图像的认知特性。因而,统计回归理论及基于回归模型的图像处理技术在近年来获得了广泛的关注。本文中,我们提出了两种基于自适应回归模型的图像超分辨率算法,并探讨了图像超分辨率思想在图像错误隐藏和视频编码中的应用。本文具体的研究内容分为四个部分:  首先,提出了一种新颖、高效的基于正则化局部线性回归的图像超分辨率技术。所提出的算法是基于自适应自回归模型,在其中采用鲁棒的移动最小二乘法则取代传统的普通最小二乘法则来设计目标函数,因而可以获得对于统计异常量鲁棒的插值器。为了保持解稳定并避免过拟合,我们引入?2范式作为估计器复杂度惩罚。受近来基于流形的半监督学习的启发,进而显式地考虑图像内在的流形结构,以同时利用已知和未知像素点中蕴含的信息。特别的,将由未知点的边缘概率密度函数所反映的图像内在几何结构作为额外的局部平滑保持约束引入到目标函数当中。最终,最优的插值模型参数可以通过求解一个凸最优化问题获得解析解。实验结果证明了所提出的算法取得了非常好的插值性能,特别是在边缘结构保持方面。  其次,提出了一种新颖、高效的基于局部和全局一致的直推回归的插值算法。所提出的算法首先构造一系列的局部插值模型,来预测所有样本点的亮度值矢量,并且最小化预测误差以保证在已知低分辨率样本点上的预测值充分地接近真实值。然后,所有的局部邻域误差累加起来以反映所有样本点的全局一致性。最后,引入图-拉普拉斯正则项来约束全局亮度值矢量的平滑性,这可以充分地利用已知和未知样本点蕴含的信息,并减弱由于训练样本不充分所带来的局部插值模型的不鲁棒性。我们将这三部分融为一体,提出了一个统一的目标函数来结合局部线性回归的局部和全局误差,已知低分辨率样本点的预测误差,以及流形正则化项。求解这个目标函数可以形式化成一个凸最优化问题,并可获得解析解。实验结果验证了所提出的方法的有效性。  接下来,探讨了图像超分辨率的基本思想在图像错误隐藏中的应用,提出了一种新颖、高效的多尺度图像错误隐藏算法。所提出的方法结合参数和非参数的贝叶斯回归模型,渐进的从粗尺度到细尺度恢复丢失的块,并最终恢复图像中丢失的边缘和纹理结构。一方面,在每个尺度内,使用非参数化回归技术以利用尺度内的相关性,在此这个过程中,图像的非局部自相似特性用来提取有用的先验信息以恢复丢失的图像块。另一方面,参数化回归技术用来显式地建模尺度间的相关性,在此过程中,图像的局部结构规则化被充分地利用以恢复尖锐的边缘和主要的纹理结构。所提出的方法通过多尺度金字塔形结构来结合非参数和参数化回归技术。实验结果证明了我们的方法取得了较之主流算法相当甚至更好的性能。  最后,针对无线传感器网络,提出了一种实用、高效的基于图像超分辨率思想的多描述视频编码框架。所提出的框架满足低码率和低复杂度的约束,且具有一定的容错性能并且是标准兼容的,因而,非常适合于无线传感器网络环境下的视频通信。在编码端,视频序列根据时域复用和空域自适应下采样生成两个子描述。这两个子描述在时域方向是相互交织的,并且仍然保证方形的样本网格结构。因而,两个子描述不需要修改现有标准的视频编码标准就可以获得进一步压缩,以降低码率。在解码端,两个子描述首先解码,然后在另一个的帮助下重构成原始的视频序列。此过程可以形式化成受约束的最小二乘回归问题,在其中根据不同的预测模式选择二维或者三维的自回归模型。通过这种方式,可以充分地利用时空域的相关性。实验结果证明,所提出的方案在低码率时取得了比当前主流编码器更好的率失真性能,在中码率时取得比当前主流编码器更好的主观视觉质量。
其他文献
在现实世界中,许多领域中的数据都可以用“图”来表示。与传统的关系数据相比,图数据有着更大的灵活性。而由于数据本身的不精确、获取数据的实验手段的局限等因素的影响,不确定
随着移动通信技术的蓬勃发展、以及智能移动终端的广为普及,移动云计算正在加快商业化进程的步伐,现在已经有越来越多的用户采用移动设备来享受云服务体验。如何为用户选择“合
随着语义Web技术的不断发展,作为语义Web的核心,本体及其相关研究也得到了很大的进步。同时,作为一种清晰表达语义和知识共享的方式,本体在生物医学信息学、电子商务等方面也
在很多实际应用中,比如网络入侵、医疗诊断以及故障检测等,分类处理的对象大多是不平衡数据(集),即某些类别的样本数量明显少于其它类别的数据集,通常这些数据集中的少数类包
随着信息技术、互联网技术的迅速发展,人们可以方便的进行数字信息的交换和传输。这虽然让人们的生活和工作更加便利,工作效率提高,但是带来了数字媒体的盗版。一些人为了谋
随着无人机技术及通信能力的不断提高,无人机在军事行动、紧急搜索以及灾难救助等多种场景得到广泛应用。由多架装有传感器和武器的无人机组成的蜂群状分布式网络,这种传感器群
后基因组时代生命科学中最重大的研究课题之一是蛋白质组研究,对蛋白质空间结构预测研究在整个蛋白质组计划中占有着极其重要的地位。蛋白质预测结构研究内容包括:序列预处理、
现实世界中存在大量的复杂系统,这些复杂系统通常被抽象的描述为复杂网络,如生物网、神经网络、因特网、万维网和社会网络等,复杂网络通常具有社团结构特性。研究复杂网络的
无线传感器网络作为目前研究热点,融合了嵌入式、无线通信以及分布式等技术。它具有广泛的应用前景,在医疗监测、城市管理、智能战场、农业监测、抢险等领域具有极大的应用价值
随着互联网的发展,高校学生可以在校园内随时随地的通过手机、电脑访问因特网,并对社会现象、国际大事、社会道德问题、校园生活等发表言论,这很容易引发舆论危机。建立高校