【摘 要】
:
随着电子设备技术以及网络通信技术的高速发展,便携式电脑,智能手机等设备让互联网社交进入了自媒体时代。公共网络平台上涌现的大量短视频数据亟待分析管理,因此研究智能视
论文部分内容阅读
随着电子设备技术以及网络通信技术的高速发展,便携式电脑,智能手机等设备让互联网社交进入了自媒体时代。公共网络平台上涌现的大量短视频数据亟待分析管理,因此研究智能视频分析技术具有一定的理论意义和较大的实际应用价值。视频的自然语言描述,作为计算机视觉领域的一个重要分支,给智能视频分析检测技术的研究带来了更高的要求。短视频社交平台如抖音、快手上的黄色暴力等违法视频层出不穷,而目前主要依靠人工方式来检举控制这类视频的传播,该方法成本高且效果不太理想。短视频的自然语言描述技术不仅可以控制违法视频的传播、维护网络安全性,还可以协助网络公共平台进行高效地视频检索与分类管理。本文立足于解决实际问题,结合深度学习、自然语言处理等方法,提出了较现有方法而言鲁棒性更强,结果准确度更高的短视频自然语言描述生成技术,解决的关键问题及研究方法如下:1、针对开放域视频特征提取的不完整性问题,提出了一种多模态特征提取方法。该方法使用独立的特征提取模型分别提取了视频的RGB特征、光流特征、音频特征以及C3D特征,它考虑了视频多维度的信息。实验结果表明,本文提出的方法具有一定的鲁棒性,在任何场景下都能够保持较好的物体和事件检测效果,可以提供完整而深度的视频特征表示。2、针对自然语言模型生成结果准确度不高的问题,提出了一种基于多模态注意机制的双向自然语言模型。该模型分为两个阶段,即编码与解码。在编码阶段,视频不同模态的特征向量分别输入到单独的双向递归神经网络中,更确切的说是长短期存储单元,输出为隐藏状态向量。双向编码器可以在正向与反向两个方向上对特征向量进行编码,较单向模型更为有效与全面。在解码阶段通过引入多模态注意机制融合各类隐藏状态向量,使得模型可以更准确地将序列状态向量解码为序列单词。实验结果表明,本文提出的自然语言模型提升了视频描述语句的准确性。3、针对目前国内外相关研究都是生成英文描述语句,极少有跟中文相关的问题,提出了一种生成视频中文描述语句的方法。主要解决了中文数据库建造以及中文字符的表示与处理两个问题,本文提出的方法与结果可以作为后续相关研究者们的有效参考,对于计算机视觉和自然语言处理等领域都有着很大的意义与价值。
其他文献
在物理教学实践中,学生的物理学习能力一般是不同的,培养、提升学生的物理学习能力,突破思维定式的影响,善于运用物理理论知识解决实际问题,是物理教学成败的关键。本文就培养学生
自2010年起,微博迅速发展,开启了浅阅读、碎片化的微时代。微博作为一个准入门槛较低的高便捷性平台,加之其开放性强、时效性强、信息传播范围广、针对性强的特点,催生了段子
[目的]探讨损伤控制外科(damage control surgery,DCS)理论在严重骨盆骨折治疗中的指导意义。[方法]对2009年3月~2013年4月间运用损伤控制外科理论指导治疗的45例严重骨盆骨
[目的]研究玉米素对蓝莓组培增殖生长的影响。[方法]以蓝莓嫩芽茎段为外植体,进行初代培养、继代增殖培养研究,探讨玉米素对蓝莓组培增殖生长的影响。[结果]WPM+1.0~4.0 mg/L
随着我国进入互联网时代,信息技术和网络技术等都得到了快速的提升,电子商务产业应运而生,电子商务产业成为我国现代化市场经济的主流产业,不仅实现了经济的均衡发展,同时也
对国内外农户技术采纳行为的研究,从理论研究与实证研究两个方面进行了总结,并对农户技术采纳行为的研究现状进行了评价。总体来说,关于农户技术采纳行为的理论研究较少,理论
为了摸清呼和浩特市地区木本植物白粉病的发病情况及白粉病的种类,本研究采用沿路踏查的方式对呼和浩特市地区周边的各大公园等地进行了详细的调查,共采集标本300余份,采用形态学分类方法对该地区的木本植物白粉病进行了病原鉴定,主要研究成果如下:(1)通过沿路踏查的方式对呼和浩特市的小井沟、南天门、满都海公园、敕勒川公园、青城公园、树木园、成吉思汗公园、乌兰夫纪念馆以及呼市周边各大校园等地的调查,共发现17
酪氨酸蛋白激酶(tyrosine protein kinase,PTK)和磷酸酶(protein tyrosine phosphtase,PTP)构成的可逆磷酸化机制在动物细胞的信息传递中具有非常重要的作用,但在植物中一直没有
当下,随着互联网技术的发展和计算机技术的进步,新闻生产也正经历着数字化转型。以大数据技术为核心,凭借计算机软件分析并通过可视化技术呈现的数据新闻,正作为一种新型新闻报道形式愈来愈受到媒体的追捧。数据新闻的大“热”之下,却也产生了许多问题,因此借鉴新闻叙事学的学科视域,选取中国数据新闻学界与业界的示范性案例——中国数据新闻大赛获奖作品,探析其在新闻叙事层面上所展现出的特征,通过特殊性去揭示普遍性,既
目的通过研究胸外科重症监护室临床护理评分系统(TISS 28)与综合护理时间的相关性,建立综合评价回归模型,从而预测胸外科重症监护室临床护理的需求,动态合理调配护理人力。方