基于帧对齐的网格变形视频重定向研究

来源 :广西大学 | 被引量 : 0次 | 上传用户:zxms008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体技术的不断发展,各种视频终端设备如手机、MP4、电脑、高清电视等层出不穷。不同终端设备的屏幕尺寸和宽高比例也不尽相同,这就带来新的挑战——即如何改变原始视频的分辨率使视频满足不同终端设备的显示需求。传统的裁剪、边缘填充,均匀缩放三种方法忽视了视频内容的差异,导致视频内容的显著部分出现失真变形,基于内容的视频重定向方法便由此而生。基于内容的视频重定向算法综合考虑视频内容的不同,其主要目的是在视频重定向的过程中尽可能地保护图像显著部分不发生变形,视频帧之间尽量不产生抖动,同时算法应具有高效性。现有的基于内容的视频重定向算法得到的结果仍不够理想:按顺序求解视频帧的重定向方法大多数仅考虑相邻两帧或相邻几帧之间的内容相关性,这种方法计算复杂度低,但是结果视频难以同时保持空间连贯性与时域连贯性;而同时求解多帧视频的重定向方法能够得到较好的重定向结果,但该方法运算复杂度极高,难以实时处理视频流。此外,当视频背景包含某些对人眼观看视频有影响的特征时,基于网格变形的重定向算法就会造成空间内容的不连续现象。为了解决以上问题,本文对基于帧对齐的网格变形视频重定向算法进行了深入的探讨与研究,研究结果如下:提出了一种基于帧对齐的网格变形视频重定向算法。该算法在获得图像的显著性区域和运动显著性区域的前提下,以视频首帧为基准,通过估计帧间摄像机的运动,将各视频对齐在相机坐标下,从而获得包含多帧运动信息的全局运动历史图;然后利用运动历史图来顺序指导单帧图像形变,将单帧图像的放缩问题转换为网格变形问题,通过构造一系列约束条件在网格上建立保持整体形状的最优化模型,最终求解变形网格以获得重定向后的视频。实验结果表明:无论是处理静止的视频还是具有复杂运动的视频,本文方法都能得到较优的重定向结果,在保持视频背景良好的时间连续性的同时又有效地保持运动对象的形状,且能实现对视频流的实时处理。由于基于网格变形的视频重定向算法将变形部分尽量压缩到背景之中,如果背景里包含某些对人眼观看视频有影响的特征,就会造成空间内容的不连续现象。为了解决这个问题,本文提出了一种基于网格变形和智能裁剪的多算子视频重定向算法,该算法可以有效减少由网格挤压带来的空间内容失真,从而输出空域内容连续性保持更好的重定向视频。具体来说,首先将视频帧对齐在相机运动模型下,从而获得运动历史图,根据运动历史图为每个视频确定不同的裁剪窗口,然后根据各视频帧的重要度图,借鉴动态规划算法找出一条最优的裁剪路径,得到裁剪窗口和裁剪路径后,对视频帧和重要度图进行裁剪,换算出从裁剪序列到重定向视频大小之间对应的缩放因子,在网格变形基础上进行重定向操作。实验结果表明:本文提出的视频重定向算法能有效减少由网格形变带来的物体失真,获得的结果在保持重定向视频良好的时间连贯性的前提下,也能更好的保护原始视频重要区域不发生变形。
其他文献
学位
α-蒎烯是我国的优势资源松节油的主要成分,是自然界中存在量最多的单萜烯烃之一。α-蒎烯环氧化物是一种重要的香料中间体,可进一步合成两百多种精细化学品。当前工业化的α-蒎烯环氧化反应是用强酸作为催化剂,反应速度快,但副反应多,而且酸易造成设备腐蚀。化学酶法环氧化使用相对廉价的脂肪酶做催化剂,反应条件温和,选择性高,具有很好的研究价值。目前,脂肪酶催化α-蒎烯环氧化反应主要以有机-水“双相”系统为主,
地理概念内涵丰富、类型鲜明,对地理学习具有关键作用,其价值在新高考地理选考中得到充分体现。本文以浙江省地理选考卷为例,探究试题中的地理概念,挖掘概念背后的学习价值,并立足新高考,以地理概念的形成、理解、保持、应用、迁移为主线,探索其实施策略。
学位
蜚蠊药用历史久远,我国现存最早的药学专著《神农本草经》,将之列为中品,属于能治病的中药。有研究表明,氨基酸和各种昆虫神经肽是存在蜚蠊机体内的主要化学成分。因此,本论文采用毛细管电泳及其联用技术对蜚蠊制剂中多肽成分及氨基酸成分进行定性定量分析和指纹图谱研究。论文共四章,主要内容如下:第一章建立了一种同时分离5种蜚蠊多肽的毛细管区带电泳(CZE)分离检测新方法。在检测波长为214 nm,分离电压25
铅、锌污染问题日趋突出,若植物体内富集铅、锌达到一定范围,其生长发育造成一定的抑制作用。因此,本研究采用盆栽试验,选择优良园林绿化树种假苹婆(Sterculia lanceolata)一年生苗木作为试验材料,控制实验条件下,设置不同浓度铅(250 mg/kg、500 mg/kg、900 mg/kg、1600 mg/kg)、锌(150mg/kg、300 mg/kg、500 mg/kg、900 mg/
学位
为了充分发挥智媒体在新型主流媒体平台构建和现代化国家治理中的作用,应为优质传媒平台的发展创造良好的环境,以确保媒体产业的长远稳定发展。对智媒体的概念进行介绍,分析智媒体的特点及优势,并对其发展过程中存在的问题进行综合论述。在此基础上,探讨新时代智媒体的发展路径,做好顶层设计,增强新闻生产的透明性,协同新闻价值与用户喜好,建立相关的政策规范,完善智能平台建设等,确保智媒体在新时代能够找到正确的发展路
期刊
多媒体技术的快速发展,使人们能在具有不同显示尺寸的设备上流畅地观看视频节目。为了使视频适应不同的播放设备,需要对视频进行缩放处理。采用均匀缩放、边缘填充和裁剪等传统的视频重定向方法对视频进行缩放处理时,由于不关注内容本身的特征,往往造成重要内容的丢失或变形,并且容易使视频产生抖动或者出现波纹状,影响人们的观看体验。近年来基于内容感知的视频重定向方法成为了研究热点,该方法的目标是在视频尺寸的缩放过程
学位