基于深度学习的视频插帧技术

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:kongxianghua
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频插帧是计算机视觉技术在视频增强领域的应用,目标是提高视频的帧率,增强视觉效果的连续性。受益于深度学习技术的快速发展,基于卷积神经网络的视频插帧技术近年来成为了重要的发展方向。目前,一系列结合了和光流估计和深度学习的方法代表了视频插帧领域的先进水平。然而,真实场景中许多复杂的场景。例如,细小物体的运动,对于光流估计和视频插帧都具有挑战性。为了增强模型运动估计的能力,进一步提升视频插帧的效果,提出了本文的光流模型和帧合成模型。本文的主要创新如下:(1)对实例归一化进行改进,提出了可逆实例归一化。针对本课题的硬件设备很难使用足够的批尺寸来支持批归一化的效果的问题,本课题改进了实例归一化容易丢失信息的问题,用于代替批归一化加速网络的训练。(2)提出了自适应密集变形层,用于代替目前光流网络中的标准组件后向变形-匹配代价卷结构。通过明确搜索匹配点和初始光流映射点之间的未知关系,减少对于单个像素而言的不确定性,有效改善了光流网络搜索匹配的效率。(3)引入特征注意力机制,并提出了分组误差,有效减少了搜索匹配过程中对匹配点特征降维过程中损失的有效信息,便于卷积神经网络区分不同匹配点的准确性。(4)在多个尺度上扭曲图像特征,减少了前向变形过程中原始图像信息的损失,为卷积神经网络复原中间帧提供了有效的信息,从而改善视频插帧的效果。
其他文献
加强无缝线路钢轨焊接质量控制,是减少焊接缺陷、降低焊接接头折损率、提高无缝线路行车平稳的关键.以成都工务大修分段焊接施工实践为基础,分析产生焊接质量缺陷的原因.加强
随着虚拟现实技术的快速发展,计算机动画现在已经在人们的生活中的各个领域占有重要地位,其中,通过人体运动数据去建立的动画也有很大的市场需求。近年来,构建人体运动的手段
随着石油开采和石油化工行业的快速发展,石油烃污染地块逐渐增多。采用土壤气相抽提技术修复石油烃污染土壤具有经济、高效和可操作性强的优点。在热强化条件下,土壤气相抽提
说明学术论文交流在行业学会工作中的重要性,分析了进行论文评价应注意的问题,对如何发挥行业学会的主渠道作用提出了建议.
药物临床试验是新药上市前的一个重要研究阶段,应用药物临床试验信息管理系统是实现规范化与信息化管理的有力保障。为了适应不断增加的药物研发应用需求,药物临床试验管理信
主要以注塑机机械手的控制系统展开论述,完成了硬件电路设计及软件设计,包括输入输出模块,步进电机控制,单片机的选型,各驱动模块的选择等。采用单片机作为CPU(Central Proces
思想和表达形式是两个不同概念,它们既相互区别又相互联系。在当今世界范围内绝大多数国家都规定著作权法只保护作品的形式而不保护作品所传达的思想,包括我国在内。著作权法作
目的:建立脑卒中后抑郁症(post-stroke depression,PSD)的大鼠模型,观察海马脑源性神经营养因子(BDNF)的损伤情况,并从分子生物学角度研究中药涤痰开窍方对脑卒中后抑郁症大
1883年英属印度特使忒涅出访札什伦布,在其报告中记述了班禅朝觐期间清廷治藏方略的调整。对比中方文档并考证忒涅记述,可以确证班禅朝觐期间,乾隆皇帝对治藏方略有两次大的
习近平总书记在2018年全国教育大会上的讲话精神,开启了课程一体化改革的新时代。足球课程作为学校体育发展和综合改革的创新示范项目,成为体育课程改革的先头兵。目前,小学