基于压缩感知的视频超分辨率重建及并行化

来源 :浙江大学 | 被引量 : 0次 | 上传用户:rsdt25302530
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
压缩感知理论是最近几年提出的基于信号稀疏性的理论,它为图形学领域的很多方向提供了新的思路。使用基于压缩感知理论重建的图像相对于传统算法重建的图像能保持更多的细节信息,获得更好的重建结果,本文采用的重建思想就是基于压缩感知理论的。压缩感知理论本身的特点决定了重建过程是相对复杂的,以本文采用的视频为例,将分辨率为256×256的低分辨率视频重建为512×512的高分辨率视频,需要3~4秒的时间,但视频的实时性又要求每一帧的重建在很短的时间内完成(一般为几十毫秒),为了达到该目标,本文采用了如下优化策略:1)通过并行计算减少重建时间;2)减少数据在主机端和设备端之间的传递;3)通过研究视频解码,找到帧间冗余,减少重复计算。显卡提供了能进行并行计算的GPU,计算能力相对于CPU有了几十甚至上百倍的提高。并行计算的思想是将计算量大的部分通过并行计算的方式在GPU上实现,剩余的计算和少量的逻辑控制在CPU上实现,结果表明该模式相对于只使用CPU进行计算的模式加速了几十倍,为将重建算法应用到视频的实时重建提供了可能。由于最终生成的结果是在GPU的全局存储器中,可以借助openGL和CUDA的交互,将生成的结果直接在显卡上显示出来,减少了数据在内存和显存之间的传递,提高了帧率。日常常见的视频格式都是压缩视频,帧间冗余信息在视频的编解码过程中会有所体现。相邻的帧之间存在很多没有任何变化的块,对于这样的块可以保留上一帧的结果,而在下一帧中不需要进行重复计算,从而减少了计算量,进一步提高了重建帧率。经过以上三种优化策略,实现了对分辨率为256×256的低分辨率视频的实时重建(平均15帧每秒),重建结果相对于常见播放器拉伸后的结果有了明显的改进。
其他文献
云计算是互联网产业中用户和企业需求驱动的产物,以服务按需付费为特点,为用户提供更为高效便捷的服务。随着云计算的高速发展,云存储也因其高扩展性、高可靠性和低成本的特性受
随着现代科学技术的不断发展,越来越多的领域运用到了计算机视觉图像处理的技术。其中,视频目标跟踪是一个新兴的研究方向,它融合了多种高级的科学技术,诸如人工智能、模式识别以
BWDSP100是一款国内近期开发的高性能数字信号处理器,本文所论述的工作是以Openimpact为编译基础架构,为BWDSP100实现调试信息的生成和复数乘法操作的优化。   基于编译基础
免疫水印是近些年来在传统数字水印的框架基础上提出的算法模型,它不同于普通水印,最后得到的公布图像具有免疫性和自恢复性,并且可以对嵌入的自恢复信息进行加密处理,在版权保护
当今社会互联网技术已经得到广泛运用,这就带动了电子商务现今的高速发展,同时也导致了Internet中的资源数量以几何数级在快速增长。“信息爆炸”和“信息过载”使得人们在面对
随着经济社会的发展,各行各业对软件的需求和依赖程度在逐渐增强,与此同时,软件安全问题日益突出,特别是在一些安全攸关的领域中,软件的可靠性变得十分必要。提高软件可信程度的方
Nowadays computers have become the most important tools in many aspects of human life. Machine translation, the automation of the translation process by compute
云中聚集了大量的资源和服务,可以供租户选择和使用。租户可以利用云中已有的服务,根据服务的定制规则和自己的需求,将其组合成新的应用。这些应用通常被称作多服务应用,构成
随着网络技术的发展,以及外包计算和存储的大量涌现,一种新的计算模式---云计算,正在逐渐兴起。所谓云计算,是指通过网络方便按需地访问可配置的共享计算资源,如网络、存储、
如今,互联网技术的发展日新月异,互联网已经逐步渗透到了人们的生活之中,并成为了人们获取信息、传播消息的重要渠道。伴随着Web中信息的爆炸式增长与迅速传播,Web已经成为了