论文部分内容阅读
近年来,体育视频分析因其巨大的商业价值及广大的应用前景而受到国内外科研工作者的广泛关注,并成为多媒体领域内的一个热点研究课题。当前体育视频分析的主要研究内容包括:视频底层特征分析、中级语义信息提取(即语义事件检测)、高级事件推理、精彩事件检测、自动摘要生成、视频浏览、视频检索、个性化定制、视频内容编辑等。本文工作主要关注于体育视频中级特征的提取(如,体育节目的语义镜头分类、重放镜头检测等)以及以多模态特征融合为基础的精彩片段检测与提取,并在此基础上进行了个性化定制方面的探索。具体表现在以下几个方面:(1)为了对镜头进行有效的分类,提出了一种基于决策树的体育视频镜头分类方法。首先,定义了几种重要的镜头类型,然后在视频图像序列上联合颜色、纹理、边缘、形状等特征并利用决策树对图像进行分类。最后利用镜头中所包含的所有帧的分类投票结果来决定镜头的类型;(2)为了准确的检测重放慢镜头,提出了一种基于重放Logo和镜头上下文的重放镜头检测方法。该方法不仅能够准确定位重放镜头边界,而且还可以鲁棒的识别重放镜头。(3)在镜头分类和重放慢镜头检测的基础上,利用多模态特征融合的方法(融合视觉、文本等信息)对体育视频中的精彩片段进行检测和提取,同时利用提取的高层语义概念(球员名、球队名、事件类型等),对所提取的精彩片段进行语义标注,并建立视频文件数据库。(4)在视频语义分析及标注的基础上,进行一些个性化定制方面的探索性研究,开发出一套基于移动平台的体育视频个性化定制系统,为广大移动设备用户提供方便、快捷的体育视频个性化定制服务。