基于注意力机制的关键帧选择算法的视频摘要视觉辅助技术

来源 :天津大学 | 被引量 : 0次 | 上传用户:lhmsgy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网上海量的视频数据需要高效的视频浏览和检索策略。以前它是在视频摘要(VS)的帮助下通过提取关键帧来实现的。同时,高质量的VS特征提取使得其可以应用于视频相关的巨大应用中,而随着处理时间的推移,这些应用又显示出相当大的效果。视觉注意建模也被用于视觉系统中,其中关键帧提取(KFE)技术是基于人类注意建模理论的。然而,由于在日常情况下计算成本高,这些技术的使用受到限制。在此背景下,基于有效的视觉注意模型推荐KFE技术。通过使用基于时间梯度的动态视觉高亮,而不是传统的光流技术,将计算工作量降到最低。此外,利用离散余弦变换对静态视觉显著性进行分析。采用非线性加权融合技术,将动态和静态视觉注意度量融合。我们的工作提出了一个基于视频视觉注意的KFE有效框架。利用静态和动态帧融合结果得到的信息,得到具有代表性的帧。静态帧中的信息通常是前景和背景模式的组合。我们使用了一种“自底向上”的空间显著性方法,通过使用图像签名模型来获得视觉上更清晰的前景数据。自下而上的方法是反思性的、自主的、临时的和快速的。在调整大小和静态静默技术之后,将地图计算与其他计算一起使用,以获得表示静默帧的平均注意值。另一方面,对于时间显著性,通过在相邻帧之间寻找强度值的详细处理来获得注意值。人类的大脑更关注那些被快速解释的非线性方面。因此,非线性方法的应用要优于线性方法,这也是我们采用非线性融合技术的原因。两个模型的结果通过一个非线性加权融合模式进行融合,融合了之前使用的模式的所有优点,得到了相应的注意曲线,最终得到特定视频数据的代表性关键帧。该方法不仅能提供有效的结果,而且适用于小型器件。时间梯度的使用有效地替代了目前使用的传统的面向流动的光学特性。基于一组准则的实验结果表明,使用该模式提取的关键帧在语义上是相关的,并且比用于评估该模式的其他方法生成的关键帧更注重突出显示。
其他文献
以发展农村经济为主带动城市经济的发展,这一战略目标注定成为我国农村未来的经济发展道路上的风向标。但是就目前我国农村经济体制来看,相关经济产权制度的改革仍然存在着大大小小的问题,其对集体经济造成的影响也是不容忽视的,因此在农村集体经济方面还需要多加重视研究,才能为全面发展农村经济保驾护航。习近平总书记于2020年带领党中央正式就如何提升农村集体经济这一事项,提出了加强农村经济管理的农村集体产权制度改
学位
在我国经济的高速发展背景下,资金供给的及时性成为公司稳定发展的重要保障。公司的融资方式常分为股权融资和债务融资,而为保证原始股东的权益份额,多数公司采取债务融资方式获取资金。但债务融资方式往往伴随着巨大的偿债压力,如无法合理有效地对其进行融资管理以及风险管控,将债务融资控制在一定的限度范围内,则会发生公司层面的债务危机。本文通过阅读相关文献,梳理了目前国内外学者对债务危机的研究情况。在此基础上,对
学位
融资租赁集合了融物和融资的双重属性,能够有效地降低企业的融资成本,提升企业的资金利用效率,提高生产、运营、销售水平。然而,由于我国融资租赁产业发展时间尚短,缺乏完善科学的行业标准和法律规范;融资租赁公司自身内部管理机制也存在诸多问题,增加了我国融资租赁公司风险管理难度。切实的分析公司的风险管理情况,有助于提高企业自身风险管理水平,提升经营利润效益,维持长远稳定运营。本文以BH融资租赁公司为研究对象
学位
近年来,设定股权激励在上市公司中是一种很流行的吸引和招揽人才的做法,尤其是医疗行业。对于医疗行业来讲,人才不乏可以划分为三类:即管理型人才、销售型人才和研发型人才,这种迫切需求是医疗行业实施股权激励计划的企业数量超过其他行业的重要原因。事实上,股权激励不仅仅可以吸引和招揽人才,还有解决委托代理矛盾,提升公司长期发展的业绩与市值的作用。本文以恒瑞医药为主要研究对象,介绍了其自2010年以来实施的四期
学位
从高校教师创新创业能力发展角度分析了高校教师发展平台建设的意义和作用,探析了高校教师发展平台对教师创新创业能力发展的作用。
期刊
疫情的突然来临,给传统课堂教学带来了新的挑战,同时也为混合教学提供了实践契机。随着互联网技术的发展,线上与线下教育资源不断融合,混合教学常态化也将成为教育发展的必然趋势。而目前,网络学习行为分析的研究对象,多集中于成年人。其与青少年的身心发展存在显著差异,故而学习行为分析无法直接为中学阶段的教育决策提供支持。因此,分析中学生网络学习行为,对促进中学教学改革、提升教学质量意义重大。本研究立足中学生学
学位
目的 研究雷贝拉唑联合莫沙必利治疗慢性胃炎的临床效果。方法 100例慢性胃炎患者,根据抽签顺序分成实验组与对照组,各50例。对照组采取常规三联疗法(克拉霉素+阿莫西林+奥美拉唑)治疗,实验组采取雷贝拉唑联合莫沙必利治疗。比较两组临床疗效、幽门螺杆菌(Hp)根除率。结果 实验组治疗总有效率98.0%高于对照组的84.0%,差异有统计学意义(P<0.05)。实验组Hp根除率94.0%高于对照组的80.
期刊
党的十九大报告强调,要完善各类国有资产的监管体制,改革国有资本授权经营模式,加快推进国有经济布局优化、结构调整、战略性重组,促进国有资产保值增值,推动国有资本做强做优做大。并购重组是深化国有企业改革、培育具有国际影响力的世界一流企业的重要路径。但是目前关于我国央企之间的并购动机和绩效如何尚待进一步研究。本文以国资委成立以来建材行业规模最大的中央企业合并重组案—中国建材集团与中材集团的合并重组为案例
学位
近年来媒体的存在与报道形式趋于多样化、开放化,媒体报道也成为热门词汇,媒体这一外部监督逐渐得到公众的重视。要想提升企业价值不单单是做好公司财务、产品销售、公司内部治理,外部影响也尤为重要。媒体发挥信息中介作用和监督作用,从外部角度影响着企业发展。当下有色金属行业的发展处于新旧动能转化的关键时期,经济与环境双保证的要求,使本文将目光放在有色金属行业环境污染事件上。违法行为曝光后,探究媒体的公司治理效
学位
伴随中国综合国力的提高,汉语热开始兴起,其中海外华裔儿童是不容忽视的一个汉语学习群体。但由于各种原因,海外华裔儿童在汉语学习过程中遇到了诸多困难,随着互联网的普及和快速发展,海外华裔儿童线上汉语教学平台应运而生,海外华裔家庭也越来越倾向于使用线上汉语教学的方式。因此,本文通过运用比较分析法、调查分析法和个案研究法对海外华裔儿童线上汉语教学展开研究,从而对海外华裔儿童线上汉语教学提出建议,以促进海外
学位