基于光流法的3D视频稳定虚拟视点生成研究

来源 :北京邮电大学 | 被引量 : 1次 | 上传用户:uxc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
3D技术的蓬勃发展使得3D视频深入人心。与戴眼镜式的3D技术相比,裸眼式3D给人们提供了更为轻松的观看体验。裸眼显示方案通常在已有的双目3D视频下生成多个中间视点,然后将生成的多视点合成最终的3D视频。然而,在生成多个中间视点的过程中,常常会因为立体匹配不稳定等因素,而出现不同程度的抖动现象。如何有效生成稳定中间视点并保证它们的连续性,这无疑是一个很有意义的研究课题。本论文在研究虚拟视点生成技术的基础上,分析了虚拟视点生成不稳定的原因,针对其主要原因,利用光流的跟踪来进行抖动抑制的改进,提出了两种稳定虚拟视点生成的方案,具体研究内容和成果如下:1.提出了一种基于稀疏光流跟踪的稳定虚拟视点生成方案。该方案主要从特征点提取、中间视点生成以及特征点纵向跟踪三个方面保证稳定性。采用SIFT算法能够得到稳定性较好的特征点集;将Delaunay三角剖分与Direct3D技术相结合,实现了中间视点的有效、快速生成;为了保证纵向生成视点间的稳定连续性,采用Lucas-Kanade稀疏光流法来跟踪特征点集,将图像金字塔引入到该光流法中,使其更适用于大而不连贯的运动;为保证跟踪过程的稳定可靠性,还进一步引入了跟踪周期,通过实验验证了这种虚拟视点生成方案不仅速度快,生成的中间视点质量较高,且有效改善了中间视点不稳定和不连续的现象。该方案回避了深度图的生成和空洞填补等难题,方便于实际应用。2.提出了一种基于稠密光流跟踪的稳定虚拟视点生成方案。该方案主要包括左右立体图像对间的光流跟踪、中间视点生成以及视频帧间跟踪和水平视差计算。采用TV-L1光流法进行跟踪,将图像金字塔与其结合从而充分优化了该光流法的稳定性。在左右图像对间运用该光流法,得到立体图像对的水平视差,采用视差偏移法生成了多个稳定中间视点。在视频帧间同样采用该光流法进行跟踪,根据前后帧间运动信息计算得出当前帧左右图像对间水平视差。为充分保证帧间跟踪的稳定可靠性,同样引入了跟踪周期。针对稠密跟踪时耗大的问题,对原图先采用降采样,生成中间视点后再插值恢复原图像的大小。实验显示该方案能够生成较良好的中间视点,有效弥补了稀疏法部分区域模糊的现象,并对视频帧间的稳定连续性也有一定保证。以上研究给出的这两种方案各有所长,都能有效生成稳定连续的中间视点,且在一定场景下相互补充,具有一定的现实意义。
其他文献
随着中国经济的快速发展,建设项目也跟着迅猛发展。建设项目在建设过程中难免会遇到各种各样的因素影响,为了规避和降低建设项目外部风险的影响,企业就必须加强对建设项目的
农业是我国的立国之本,强国之基。农产品主产区在我国的农业地位极为重要,其农业生产状况直接关系到国家的粮食供给和粮食安全。农产品主产区农地发展权受限损失测算与补偿研
近年来,随着手机、无线通信等移动设备的迅速兴起,人们对于无线通信的服务需求也随之不断增加,如无线通信系统数据传输的质量和效率,然而在机遇的背后一些制约其发展的瓶颈问
随着信息技术的迅速发展,各种领域对CPU浮点性能的要求越来越高,而除法与开方是浮点运算中较为复杂且相当影响性能的操作。因此,开展浮点除法与方根算术运算研究具有很重要的
集群语音系统作为专用应急通信手段,在各专业领域发挥着重要作用。但是传统专用集群设备技术开发难度大,实现代价较高。而随着IP电话的迅猛发展,基于IP电话的集群语音调度系
自从09年《阿凡达》的热映,人们对于3D电影的追求近乎狂热,《变形金刚》之类的大场面电影自不必说,人们甚至追求动画片的3D效果。目前3D电影是可以直接拍摄的,但是制作周期长
随着信息化社会的飞速发展,高性能计算已成为继理论科学和实验科学之后科学研究的第三大支柱。从战略高度上讲,高性能计算技术是一个国家综合国力的表现,并在社会生活的各个
随着互联网行业的不断发展,越来越多的新兴产业加入到大数据的浪潮中,它们每天产出着海量的信息。分布式计算的出现,为处理海量数据的分析和处理提供了强有力的支持,同时也为
自人类出现以来,对于大自然的探索从来没有停下脚步。作为公众窥探和了解自然的重要窗口之一,自然纪录片以野生动植物的历史与现状、人类与自然的关系以及大自然的原始风貌为主要表现题材,表达出人类对于生态环境的深切关注,展现了人类对于社会发展与大自然两者之间关系的探索与思考,弥补了其他题材纪录片只关注人类生产活动的题材缺失。在一百多年的发展历程中,自然纪录片逐渐形成了相对完整和独立的类型体系,有着表达人文关
最近几年,煤炭市场呈现出迅猛发展的良好形势。某煤炭公司经营业绩也得以快速上升,煤炭市场的前景十分广阔,但是同时也存在很大的变数,基于此,煤炭企业倘若仍旧沿袭传统的管