视频搜索结果的重排序研究

被引量 : 0次 | 上传用户:kinglesssss
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网中视频数据在近几年呈爆炸式增长并且广泛分布,使得视频搜索成为当前视频研究的重点和热点。由于文本搜索的成功应用,现今通用的大型视频搜索引擎,如Google、Yahoo!、Live、百度等主要还是利用视频数据周围的文本信息,采用基于文本搜索的方法实现视频搜索和排序。然而,视频内容及其所包含的复杂意义通常是语言工具难以完整描述与表达的。为了解决这种原始文本搜索的缺陷,视频搜索结果的重排序逐渐引起了众多研究者的关注。重排序,是指基于原始搜索排序的基础上,通过挖掘数据内在关联、或者借鉴外部知识和人工干预,对原始搜索结果进行重新排序的过程,目的是提高搜索质量和提升用户搜索体验。本论文首先提出一种新颖的基于查询独立的学习框架,接着从三个阶段研究了视频搜索结果的重排序中的关键问题,即自重排序(仅从自身挖掘相关知识)、样例重排序(利用用户提供的查询样例)和群重排序(利用从外部搜索引擎的结果中挖掘的知识)。显然这三个阶段涵盖了现今的大部分视觉信息重排序的框架和方法。本文对视频重排序方法进行了深入的研究,主要工作和创新之处归纳为以下几点:(1)对于查询独立的学习框架,本文提出了在“查询-镜头”对中学习相关性关系。与传统的查询依赖的学习框架不同,该种方法的训练模型和任何查询没有直接关系,故训练样本在所有的查询中能达到共享,更适用于实际的应用。在这种查询独立的学习框架下,各种机器学习的方法都可以扩张并应用,从而进一步提出了一种基于SVM模型的全监督查询独立的学习方法和一种基于多图模型的半监督的查询独立学习方法。经过大量实验证实,查询独立的学习方法明显优于传统的查询依赖的学习方法,从算法的运算量角度看,查询独立的学习方法也更具有实用性。(2)对于自重排序,本文提出一种基于典型性的视频结果的重排序方法。传统的基于学习的重排序方法往往只关心训练样本的相关性或多样性,却忽略了样本的典型性。本文提出在考虑相关性和多样性的同时应兼顾样本的典型性。首先根据样本的概率分布定义视频/图像的典型性,并将样本选择看成一个既考虑样本典型性又兼顾原始搜索结果的优化问题,最后基于选择的高典型性样本并利用SVM构建重排序模型,实验表明该模型具有较好的泛化能力和较强的鲁棒性。(3)对于样例重排序,本文提出一种基于查询样例的全监督视频重排序方法。传统的全监督的视频重排序方法常根据经验将重排序问题转化为二类的分类问题,样本完全根据分类的置信度进行排序。文中提出了重排序实际上应是一个优化问题,即一个序列中的任意两个样本都能正确排序即可达到全局最优,而不是简单地区分每一个样本是否相关。在这样的框架下,进一步提出两种重排序算法,即直接重排序和插入重排序。实验证实,新的重排序方法可以较大程度地改进原始的搜索结果,与其他一些经典的重排序方法相比,也具有较大的优势。(4)对于群重排序,是本文中提出的重排序问题的新的发展阶段,旨在从互联网中挖掘相关的视觉原型并利用到重排序中。据大量资料的调研,群重排序是首次将互联网中的群包数据应用到搜索结果的重排序当中,与传统的自重排序和样例重排序有显著的不同。首先利用多个搜索引擎返回的结果图像构建一组视觉单词;接着在此视觉单词中挖掘两种视觉原型(显著度和共存性);最终基于该视觉原型将重排序问题转化为一个优化问题,并给出封闭解。实验表明,群重排序对原始搜索结果的提高是较稳定的,与传统的重排序方法相比有较明显的提升。
其他文献
<正> 一年一度的埃及开罗实验戏剧节以关注世界实验戏剧为宗旨,至今已经举办了17届,上海话剧艺术中心的原创肢体剧《人模狗样》应邀参加了今年的戏剧节。当地时间9月25、26日
量纲分析法是研究物理问题的重要方法之一,文章在阐述量纲分析的基本理论Π定理的基础上,把量纲概念与矢量空间联系起来,提出用矩阵进行量纲分析的方法,并应用该定理半定量地
分家是农户家庭生活中的重要事件。它标志着家庭成员之间权利、义务的重新界定,家庭财产的再分配和家庭的再生产。改革后俄国农村分家盛行,使传统的宗法制大家庭走向解体,形成由
中国土地资源稀缺而住房需求庞大,长期形成的农村家庭住房粗放建设惯性与当前城镇化的快速增长因素相互叠加,会造成资源与资金的浪费,不利于农村的可持续发展,因此须提倡面向
礼乐文化是中国传统文化的荦荦大端,礼文化的研究对认识中国古代文化至关重要。随着中国传统文化的复兴,礼文化受到越来越多人的关注,一些自古流传下来的礼节仪式重新受到重
《史记》是中国史学史上第一部贯通古今,网罗百代的纪传体通史巨著。相关研究可谓是汗牛充栋。由于司马迁独特的遭遇和发愤著书经历,他对那些曾在特定历史时期内叱咤风云的悲
素质教育是近年来人们热议的话题。作为素质教育中必不可少的音乐教育也越来越受到多方面的重视:国家在推进音乐教育改革方面做出很多努力,陆续推进一些改革措施,音乐新课程
研究背景:强迫症(Obsessive-compulsive disorder)是以强迫观念、强迫冲动或强迫行为等症状为主要表现的一种神经症,患者深知这些强迫症状不合理、不必要,但却无法控制和摆脱,
羊毛是纺织工业的重要原料,它有很多优点,如:弹性好、吸湿性强、保暖性好等。羊毛织物光泽自然、颜色莹润、手感舒适,品种风格多。毛料服装挺括有身骨、不易折皱、耐磨、保暖