基于多模态融合的网球视频语义分析与研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:wenhonghe
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
体育视频检索是基于内容的视频语义分析领域的重要研究方向,网球视频分析作为其中的一个研究分支,其重要性已逐步突显出来。本文结合网球比赛的特点,对网球视频中出现的精彩事件进行检测。同时本文构建了事件检测的原型系统,该系统实现了视频结构化分析、音频流分析及多模态融合的精彩事件检测等功能。视频结构化分析是整个视频检索的基础和关键,直接影响到最终精彩事件检测的效果。这部分内容主要包括镜头边界检测、关键帧提取、镜头分类和慢镜头回放检测等。采用基于主色比例差和颜色直方图差的自适应阈值镜头边界检测算法,该算法在视频播放时能够实时自动的获取帧间差阈值,鲁棒性较好,从而在适应性和灵活性上有所改善。对网球比赛视频固有的一些特点进行深入研究,构建了一种基于主颜色、网球场地线及目标对象特征的镜头分类算法,将镜头分为场内全局镜头、球员特写镜头和观众镜头。对慢镜头前后出现的徽标镜头进行研究,提出了一种基于加权形状不变矩的徽标镜头检测算法,实现对慢镜头的检测。本文实现了基于连续隐马尔可夫模型的音频分类算法。该算法的核心思想是先提取出短时过零率、短时平均能量、倒谱系数及差分倒谱系数等音频特征,其次用Baum-Welch算法训练参数,最终用Viterbi算法分类音频。本文在总结了现有的网球视频精彩事件检测方法的基础上,利用场内全局镜头、慢镜头和击球声等特征检测出上网球事件、底线对打事件和ACE球事件。最后,本文以Visual C++6.0、matlab7.1为开发平台,实现了一个网球视频分析原型系统。实验结果表明,本文提出的网球视频语义分析算法的效果令人满意。
其他文献
在生物氧化预处理过程中进气量是影响细菌和矿浆氧化效率的重要因素,所以,保证氧化槽内一定的进气量对整个生产工艺具有重要意义。受新疆高寒、高海拔地区影响,生物氧化预处
切换LPV系统是集合切换系统和LPV系统特点于一身的一类线性系统,在工业过程中有着广泛的应用,特别是在航空航天领域发挥着至关重要的作用。本质来讲,切换LPV系统是对传统LPV系统
电阻抗断层成像(Electrical Impedance Tomography,EIT)技术是近些年来发展出来的一种新的测量技术,因为它具有以下优点:无辐射、非侵入性、响应速度快,结构简单,成本低,并且
网络舆情是全球化与信息化大浪潮冲击下的产物,是民众以信息化的方式表达各自看法、观点、态度和情感信息的集合。网络既是一种对社会的监督,又是一种对社会舆情的直接反映。
工业控制系统(ICS,IndustrialControlSystem)的网络安全问题正在变得日益突出,其面临的入侵威胁也正在变得更加复杂。ICS系统随着其开放性、复杂性、外部连接性等方面的不断发
能源问题一直是制约社会发展的重大问题,各大专院校响应国家号召顺应时代发展,正纷纷开展节约型校园的建设,而对校园照明实施有效监控是最有效的途径之一。据测算,高等学校照
多源图像融合属于信息融合的一个重要分支,同时也是图像处理和计算机视觉中一项重要的技术。图像融合能生成比单一传感器更为全面、更为准确的图像描述。本文在介绍了图像融合
四足机器人已在很多领域得到了广泛的研究和应用,具有重要的研究意义和广阔的发展前景。四足机器人的研制涉及到生物力学、机械运动学、动力学、控制学科、计算机技术、传感技
脉冲切换系统是切换系统的一个重要分支。由于许多实际系统归于普通切换系统模型会与实际的结果不符,违背系统发展的规律,所以在切换系统基础上产生了脉冲切换系统。近些年,
质子交换膜燃料电池(PEMFC)是新一代的发电技术,其高效能、低噪音和低污染的优点符合人类对新能源的需求。影响PEMFC稳定运行的因素除燃料电池制造工艺以外,还包括附属的外围设备和控制系统。本文根据PEMFC的工作原理和特性,设计了百瓦级PEMFC测控系统,论文内容如下:(1)根据PEMFC测控系统的组成设计了总体方案,包括燃料电池发电系统、数据采集及参数控制系统、实时数据显示系统和故障诊断系统四