【摘 要】
:
随着计算机技术的快速发展和数字视频技术的广泛应用,视频数据呈爆炸式增长。如何有效地管理和储存视频信息成为当前信息处理研究的难点和热点。以方便视频浏览和管理为目的
论文部分内容阅读
随着计算机技术的快速发展和数字视频技术的广泛应用,视频数据呈爆炸式增长。如何有效地管理和储存视频信息成为当前信息处理研究的难点和热点。以方便视频浏览和管理为目的的视频摘要技术受到人们的广泛关注。视频摘要技术的目的是在缩短原始视频的长度的同时保留视频内容信息,这样仍能传达出原始视频的整个故事情节。它还可以减少人们搜索视频内容的巨大时间花销,节省大量的存储空间。然而,视频类型较多,并且内容较为复杂,给视频摘要算法的设计提出了较高的要求。本文针对动态视频摘要问题,围绕提升视频摘要算法的性能和降低模型时间复杂度展开研究,主要研究内容包括以下三部分。(1)引入最新的独立循环神经网络(Ind RNN),并结合注意力机制,提出了基于Ind RNN和注意力机制的视频摘要算法。该方法解决了传统的循环神经网络RNN在为具有数千帧的视频建模长期时间依赖关系存在的梯度消失、爆炸问题。同时,该模型使用注意力机制有选择地关注编码序列,指导当前的解码过程,有效提升模型预测准确性。(2)进一步探索Ind RNN和注意力机制融合的可能,提出了基于Ind RNN和自注意力机制的视频摘要算法,解决了第一部分使用双向循环神经网络带来的模型复杂度高的问题。自注意力机制可以快速探索视频帧的内部相关性,而独立循环神经网络捕捉视频序列的时序关系。该模型融合了自注意力机制和独立循环神经网络各自的优点,生成更准确的视频摘要。(3)为了进一步提高模型运行速度,使模型并行运算,我们提出使用注意力机制替代循环神经网络,并实现了基于位置感知的自注意力机制视频摘要算法。为了使注意力机制具有位置感知的能力,我们使用双向掩码建模视频序列的上下文感知信息。最终实验结果证明了该方法的有效性。
其他文献
数控加工技术是反映现代装备制造业水平的关键技术,对先进制造业的发展起着举足轻重的作用。随着数控加工向着高速高精度方向发展,NURBS(非均匀有理B样条)曲线插补技术应运而
表位是抗原与机体相互作用过程中,刺激机体的免疫系统发生特异性免疫应答的基本单位。B细胞表位是指抗原表面可以被抗体或B细胞受体(BCR)识别、诱导机体产生免疫反应的区域。
咖啡酸是一种在日常生活中常见的肉桂酸,其在生命科学和医药领域有极其重要的作用,但其也被认为是存在致癌风险的物质,快速、有效地检测其存在和含量十分必要。尿酸是人体生物代谢产物之一,尿酸水平的高低与多种疾病有关,尿酸水平的监测,对于预防相关疾病具有重要的临床价值和意义。该论文的研究工作将致力于检测这两种物质。一方面,金属纳米颗粒尺寸小、比表面积大,而且其表面的键态和电子态与颗粒内部不同,表面原子配位不
随着无线通信技术的快速发展,现存的蜂窝网络愈来愈难满足用户不断增加的数据传输需求。面对网络频谱资源的日益短缺,如何提升频谱效率已经成为5G无线通信研究中的一个重点。
移动机器人的广泛应用使得路径规划成为研究热点。时序任务约束的路径规划则是机器人研究中的关键技术之一。线性时序逻辑(LTL)理论为描述机器人的时序任务提供了理论基础,LT
本文选取2007年3月27日发生在中国西北地区的一次沙尘天气过程,利用相关观测资料分析此次沙尘天气过程的环流形势、沙尘分布特征及民勤站气象要素演变特征,在此基础上利用耦
信息融合的实质是综合利用不同视角、不同来源的多种信息,获得对事物更准确、更全面的认识和估计,该领域的主要研究内容则是建构和优化能够达到上述目的理论和方法。多目标跟踪是信息融合领域中的一个研究热点亦是其难点,基于有限集统计学理论的概率假设密度(PHD)方法体系由于克服了传统数据关联技术带来算法先于建模的困境,使建构适用于单目标和多目标的统一化滤波框架成为可能,因此,由Mahler等学者自2003年提
伴随着人类社会城市化进程的发展以及城市人口的大规模增长,对在城市公共安全、社会反恐等城市安全治理的智慧化管理需求日益凸显。随着城市大范围高密度高清视频监控体系的建设运行,如何对这些海量的信息有效的分析利用,真正发挥城市公共安全事件及时发现和防控的作用,成为该领域深化建设的关注热点和必然趋势。本文结合现实需求,针对监控视频中群体暴力行为的识别和检测这一问题,从时空特征表征、字典学习方法两个层面进行了
热力学温度的准确测量是定义国际温标的基础,噪声温度计是可以测量热力学温度的一种温度计。在我国,中国计量科学研究院于2012年分别实现了实验室水平的量子电压标定的噪声温
在网络不断发展的今天,无线局域网(Wireless Local Area Network,WLAN)越来越多地被人们应用到了宽带通信、无线接入等服务中。由于其覆盖广、性价比高、部署迅速等优势,研究