论文部分内容阅读
随着互联网这十几年来的迅猛发展以及数字采集设备的普及,越来越多的家庭用户和专业用户开始拍摄和分享生活的瞬间、重大事件报道等,在线视频以及在线视频网站呈现出快速增长的势头。从而作为在线视频网站最主要的盈利方式的在线视频广告的研究也逐渐成为国内外的研究热点。本文展示了一个称为AdOn的语境化视频广告系统,它支持智能型的间隔型叠加广告。不像目前存在的大多数如Youtube等将广告叠加在视频的固定的位置(比如叠加在视频的下方1/5处,并只在视频开始播放后15秒出现)的广告系统,AdOn自动检测一系列的不突兀的广告叠加时间和空间位置,并投放与这些叠加位置匹配的语境相关广告。本文主要的研究成果有:采用视频分析技术,获得视频的信息结构,从中选取最精华的镜头作为广告的投放时间点,可以最大化广告的效果;广告的叠加空间位置由人脸检测、文本检测以及视觉显著分析三部分决定,可以做到最小化广告对用户的突兀感;而投放到特定镜头的广告的选取是基于内容的多模式相关度,从而最大化广告的相关度。本文创新性研究工作主要有:首先提出了一种全新的采用了视频内容语境而不仅仅是用户标注的视频内容的描述文字来决定广告匹配的视频叠加广告解决方案,并将如何最大化广告的相关度并同时最小化广告的突兀度最小化公式化为一个数学优化问题。其次,实现了基于视频内容的时空分析来确定叠加广告位置的全自动化过程。最后,选取的广告不只跟整个视频匹配,而且更加深入的与将投放广告的特定视频片段的内容匹配。通过这种方式,投放的广告将与当前正在播放的视频内容更加语境相关。AdOn代表着采用信息检索和多媒体内容分析技术实现语境化视频广告叠加的开创性尝试之一。所提方案的用户体验测试采用了100多部视频节目和7000多个广告商标,实验结果表明AdOn不管是广告的相关度方面还是用户的体验度,都大大优于现有的广告模式。