基于特征融合的视频文本获取研究

来源 :北京邮电大学 | 被引量 : 5次 | 上传用户:dyc56
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频文本能够提供重要的视频语义信息以供视频检索和视频摘要。视频文本一般被划分为两种类型:叠加文本和场景文本。叠加文本主要包含视频中的标题和字幕,能够对视频语义提供重要的辅助信息。场景文本是自然场景中存在的文本,能够用来推测场景信息。因此获取视频文本对于视频语义分析具有重要作用。视频文本获取主要包括文本检测、定位、提取和识别四个步骤。本论文主要从叠加文本检测和定位、场景文本检测和定位、文本提取三个方面对视频文本获取进行研究并提出解决算法。具体的研究问题包括:如何在视频复杂背景中检测和定位叠加文本;如何在有光照变化和文本排列不规则的情况下,检测和定位场景文本;如何在检测到的文本区域中完整提取文本。本文的主要贡献如下:(1)提出了基于运动感知场的视频叠加文本检测和定位算法,为复杂背景下叠加文本检测和定位提供了一种有效方法。基于相同的叠加文本在多帧视频序列上会保持位置不变的运动模式,我们定义多帧运动向量融合的运动场为运动感知场,并通过运动感知场获取叠加文本运动模式。同时提出基于运动感知场的视频叠加文本检测和定位算法。我们在视频镜头分割的基础上,在单个镜头中提取30帧进行多帧融合形成一个融合帧,在融合帧上执行基于运动感知场的视频叠加文本检测和定位算法。最后,执行基于运动感知场的多帧验证确定文本区域。(2)提出了基于笔划图的场景文本检测和定位算法,为有光照变化和多种文本排列方式的场景文本检测和定位提供了一种有效方法。场景文本易受光照变化和文本排列方式的影响,我们定义基于字符笔划特征融合的笔划图,并基于笔划图检测场景文本。首先,对于视频帧上获取的笔划图进行基于纹理粗糙度统计的文本行检测,并运用角点检测和形态学算法定位文本区域。最后,对于一些与文本区域相似的纹理区域,提取小波矩特征、Laws纹理特征和小波共生矩阵特征作为SVM分类器的特征向量进行训练,并用这个SVM分类器在候选区域中区分文本区域和非文本区域。(3)提出了基于边缘图和颜色聚类分析的叠加文本提取算法和基于改进的Niblack场景文本提取算法,为复杂背景下的文本提取提供了有效方法。对于视频叠加文本提取,我们基于彩色梯度图算法,融合图像梯度信息形成文本行边缘图。我们提出了基于边缘图字符分割和基于K均值颜色聚类算法的文本提取算法。算法首先基于文本行边缘图垂直投影将文本行分割成单个字符。然后,用K均值聚类算法将单个字符图像划分成几个聚类图像,然后使用改进的坝点标注和向内填充算法处理聚类图像。对于场景文本,我们提出了基于改进的Niblack场景文本提取算法。(4)视频文本获取系统的设计与实现。为了验证本文算法有效性,我们设计并实现了视频文本获取的验证系统。通过在系统上的大量实验表明,本文提出的方法能够准确地获取视频文本,所获取的视频文本可以应用于视频检索和场景理解的工作中。本文主要研究了视频文本获取算法,对于叠加文本和场景文本的获取提出了一些有效的解决方法。本文提出的视频文本检测和提取算法对于视频内容理解具有实际应用价值。通过系统的实际应用验证了本文提出的算法的有效性。
其他文献
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
<正> 放风炼苗是水稻培育壮秧的重要环节。春季,我省天气变化无常,给水稻放风炼苗带来很多困难,一时疏忽,秧苗受害,就会招致“养苗日三十,伤苗在一时”的结果。那么,怎样进行
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
为保障农产品质量安全和生态环境安全,根据《中华人民共和国食品安全法》和《农药管理条例》相关规定,在公开征求意见的基础上,农业部部决定对杀扑磷、溴甲烷、氯化苦3种农药
全球每年的鸡毛产量可达数亿吨,而且还在逐年增加。少量鸡毛用作饲料、肥料,更多的被当成垃圾处理掉了。随着禽流感的流行,鸡毛作为饲料、肥料和垃圾都有传播疾病的危险。因此,科
片名《找到你》是指李捷寻找丢失孩子的过程,是获取抚养权的过程,也是找寻自己成为母亲意义的过程。电影止步于尊重每一个女性的选择,歌颂母爱的伟大,却忽视了其悲剧性的结局
随着环境问题的日益凸显,我国社会主义生态文明建设被提上日程,倡导“可持续发展”的时代已经到来,各种响应“绿色发展”的活动浪潮层出不穷,“绿色”已成为人类生活中不可或缺的代名词。深圳市作为改革开放的发展先驱,对于未来城市绿色发展方向的大政方针正在坚定不移的实施建设中。位于深圳市光明新区的阿婆髻森林公园承担着深圳市绿地系统规划和郊野公园建设发展规划的重担,与公园环境建设相配套的公共环境设施建设也以刻不
本文阐述了基于JDBC的三层结构分布式数据库系统原理,分析了J2EE平台与大型数据库的连接方法,并论述了各种不同实现方法的特点和适用的环境,给目前基于Internet/Intranet的企业ER