视觉感知特性指导下的自然图像抠图算法研究

被引量 : 8次 | 上传用户:fhzh508508
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
抠图(matting)是图像处理的一项重要技术,其目标是以遮罩形式提取出静态图像或动态视频中任意形状的前景物体,以方便将提取出来的前景物体合成到全新场景中,得到新的合成图像或视频。抠图成为图像处理的研究热点,吸引人们的关注,这主要有两方面的原因。一方面,抠图涉及到计算机视觉和机器学习的融合,为图像编辑提供基础,在工业设计和家庭娱乐等方面,有极其广泛的应用,具有巨大的商业价值。另一方面,提取任意形状的前景也是图形学和计算机视觉中非常具有挑战性的一个部分,目标形状的复杂细节、透明通道的处理、遮挡和光照改变、背景相似物的干扰等因素都使得该问题异常复杂。尽管经过几十年的研究,不同研究者提出了很多抠图算法,然而如何实现复杂环境下的鲁棒和精确地前景提取依然需要深入研究,这使得抠图具有较大的理论研究价值。本文深入分析现有抠图技术存在的问题,重点研究人类视觉感知特性指导下的自然图像抠图算法及其他若干问题。本文面向图像特效制作和家庭休闲娱乐等应用领域,将神经生物学和认知心理学中关于人类感知特性的研究成果应用到抠图算法中,尝试从这一角度出发,对自然图像抠图问题进行研究,使其在尽可能减少用户交互量的同时,获得高质量的抠图结果。本文在如下四个方面进行了研究和探索。一、从优化用户输入出发,考察视觉特性对抠图算法的影响,结合视觉注意模型,研究更为便捷的交互方式,减少用户的交互工作量:二、研究基于自然图像结构特征的三分图修正方法,降低算法对用户输入的依赖程度;对贝叶斯抠图算法进行改进,提高其对复杂图像的处理能力:三、探索以全局视觉显著性为参考的颜色样本采集方法,提高基于颜色采样的鲁棒抠图算法的准确性;四、研究基于结构特征的局部自然图像抠图算法,用以对抠图算法结果做局部修正,提高算法最终的遮罩效果。与已有方法不同,本文算法强调通过人类感知特性挖掘图像中前景目标的潜在信息,充分利用自然图像的视觉特性,在降低算法对用户交互的过度依赖的同时,提高算法的准确性。基于上述目标,本文的主要创新点如下:第一,针对包含单一前景目标的自然图像,提出了一种基于人类视觉注意模型的半自动抠图算法。单一前景图像抠图中所提的前景物体对应的正是注意模型中的感兴趣物体,本文提出了一种以注意焦点作为问题先验的抠图方法,尝试将注意模型合理的引入抠图问题中。提出包含先验指导信息的视觉注意模型,将注意焦点转移范围控制在感兴趣目标区域内。利用注意焦点序列作为图像的前景约束,能够最大限度的提供前景先验,同时避免了用户交互的无目的性。之后采用闭型优化算法求解遮罩,能够得到较高的抠图质量,实验结果表明该算法适用于前景物体唯一且连通的自然图像。第二,研究利用图像局部统计特性的抠图算法。大部分抠图算法能够取得良好效果的前提条件是用户输入三分图的精确性,然而,获取精确的三分图需要消耗大量的人力。针对三分图未知区域过大,已知信息不充分这种情况,本文提出了一种三分图修正算法,克服之前算法不能对图像结构信息建模的局限性,也降低了抠图算法对三分图精确性的要求。通过统计信息将未知区域中的若干点预先标注为确定前景和背景,对输入三分图进行修正,从而为抠图算法提供更为充分的样本。传统贝叶斯抠图是一种基于统计学习的方法,用有向高斯混合模型表示待求解区域周围的采样信息,传统贝叶斯抠图算法对每个像素点分别求解,得到的遮罩是离散的。本文根据透明度值的统计特性对原最大似然函数进行了改进,实验证明改进算法能够消除遮罩的不连续性。本算法适用于难以人工划分出精确三分图的自然图像。第三,研究基于视觉显著性的样本采集方法及基于可信度的抠图算法。提出了一种改进的鲁棒抠图算法,结合基于颜色采样的抠图算法和基于信任传播的抠图算法的优点,同时克服以往采样过程中沿区域边缘均匀采样的做法,重点采集显著样本点,从而最大限度的保证样本对的完整性。而后计算样本点的可信度,将线性假设、颜色空间距离、局部显著性等作为评判依据,选择具有高可信度的样本点来估计遮罩值,最后使用随机游走算法优化估计值。实验表明,该采样方法能够比以往采样算法得到更完整的样本对,提高了抠图算法的遮罩结果。第四,研究基于结构特征的局部修正抠图算法。提出了一种局部抠图算法,在用户给出先验信息后,首先通过核岭回归方法得到局部图像的颜色-透明度模型,之后的学习过程加入了根据图像块颜色和纹理特征得到的自适应系数,来调整目标函数中数据项和光滑项的权重。因为从图像本身的特征来看,在高对比度区域,目标函数中的数据项应该扮演更加重要的角色。本算法可用于对已有算法的抠图结果进行局部修正。实验结果显示,这种自适应的局部修正算法能够得到正确、鲁棒的结果。
其他文献
摘要:“气”与“韵”是中国古典美学中两个重要的美学范畴,它体现了中国特有的审美标准和艺术趣味,所以中国钢琴音乐同样讲究“气”与“韵”,它们既有各自的特性,又相互联系,
介绍了一种XSun煤焦油联合加氢裂化技术。与单段加氢技术相比,这种新技术不仅可以将劣质重质煤焦油重馏分几乎全部转化得到轻、中馏分,且轻质馏分收率大幅度提高,同时具有极
现代温室作为设施农业的典型代表,在反季节蔬菜、高经济价值花卉种植等方面具有突出优势。其中温室环境远程监控技术能够实现温室内温、光、水、肥等环境因子的自动调节,在增
<正> 这是一个让人眼睛一亮的好话题,可多角度理解。是旁观者的疑惑?是评判者的质问?还是当事人的宜言?我首先把它理解为讨论“现代艺术家”与其“身份”的话题。奥登伯格曾
<正> 今年8月下旬,澳大利亚国立新南威尔士州美术博物馆(悉尼)举办了首次中国画专题《中国新文人画作品展》展出了常进、方骏、江宏伟、刘大为、徐乐乐、杨春华、张道兴,朱新
作为具备重要效用的激励方式之一的股权激励在企业治理中发挥了十分重要的影响力,因此而受到西方国家的热捧。其最开始在20世纪50年代出现在美国,盛行于70、80年代,并且在90
汉代是中国神话再度活跃的阶段,是其传播流变的黄金时期。在汉代,一些神话完成了由神话到仙话的飞跃发展,即有些神话首次出现仙话化的表现;一些已具有仙话化倾向的神话也得到
验证码的主要目的是区分人类和计算机,用来防止自动化脚本程序对网站的一些恶意行为,目前绝大部分网站都利用验证码来阻止恶意脚本程序的入侵。本文以某高校教务系统的字符验证
民居是中国传统农业文明的典型代表,其数量多分布广,类型丰富,真实体现了各色乡土生活。从建筑学的角度描述宁波民居原型的基本特征,从社会学的角度深层次地分析其物质特征背
出口商品结构的优劣,直接影响一个国家(或地区)对外贸易的国际竞争力和发展潜力,也将直接影响相关的工业产品结构和产业结构的变化,进而牵动国民经济的健康、持续、稳定发展