交互式立体图像分割及修复算法研究

来源 :北京工业大学 | 被引量 : 1次 | 上传用户:huyuexing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,3D技术日益普及,立体相机、摄像机设备日益增多。立体图像的编辑和处理需求也随之增加。交互式立体图像分割和修复是其中的重要需求,在立体图像编辑、3D影视后期处理等领域具有极高的应用价值。交互式立体图像分割允许用户在任意视图上简单勾勒前、背景,通过算法实现目标物智能提取。用户可通过增加前、背景线索优化分割结果。衡量交互式分割算法的主要指标是所需交互量的多少。立体图像修复即修复去除前景后留在立体图像上的空洞。衡量立体图像修复的主要指标是有无修复痕迹和深度感知一致性。现有立体图像交互式分割和智能修复技术在智能化程度和视觉修复效果方面尚存在很大提升空间。所以本文旨在研究性能更加优越的交互式立体图像分割和修复算法。现有交互式立体图像分割方法通常对颜色和梯度等信息进行建模,在图割理论框架下通过优化求解分割结果。此类方法忽略或没有充分探索立体图像的深度线索在分割中的作用,智能化程度有限,即需要较多用户交互才能得到较为满意的结果。另一方面,现有立体图像修复技术,多是在基于样例的修复上进行改进,未考虑到整体图像的语义信息。近年来,也出现了基于神经网络的修复方法,能够考虑全局语义信息,但仅仅在单幅图像上有所研究,尚无针对立体图像修复的算法。本文的主要工作和主要创新点如下:(1)针对立体图像分割任务,通过分析颜色、视差等可用线索在分割中起到的作用,提出了混合颜色和深度线索的交互式立体图像分割算法。该算法在现有基于颜色线索分割的算法基础上,线性混合了深度/视差线索指导分割,并通过实验证明了:在相同交互量的情况下,该算法相较其它算法准确率有所提升。(2)针对立体图像分割任务,充分探索不同类型的先验线索对于不同图像,甚至同一图像不同区域而言的重要性。提出并论证了在交互式立体图像分割中,不同的图像、不同的待分割区域、不同的像素,需要不同的先验线索更好的指导分割这一理论。并根据这一理论提出了自适应先验模型的交互式立体图像分割算法,该算法能为每个像素选择最优的先验模型指导分割。实验证明:在相同交互量的情况下,与其它算法相比,所提出算法分割效果最优。(3)在现有的基于卷积神经网络的单幅图像修复的理论基础上,充分探索了立体图像的特性,深入研究了保证立体图像修复后左、右视图的视差一致性方法。提出了基于卷积神经网络的立体图像修复算法,该算法通过特别设计的网络架构以及损失函数,保证立体图像修复前后的视觉感知和视差感知一致性。通过实验对比说明了:相较于其他算法,该算法在视觉感知和立体一致性方面,表现更加良好。
其他文献
无线传感器网络(Wireless Sensor Network,WSN)是一种新兴的信息获取方式和处理技术,因其部署方便、功耗低、成本低等特点,已被应用于诸多领域,而且给更多的应用空间和应用价
现代社会的发展在本质上是依赖可靠和有效的能源来维持。从工业革命开始到18世纪末,化石燃料被证明是一种稳定的能源而被广泛应用。然而,随着工业技术迅猛发展,人类对化石能源的需求迅速增长,造成了化石能源的过度开发和利用。由于地球化石能源储量有限且不可持续利用,人类不得不转战可再生能源,如太阳能、风能、水能等。其中太阳能作为一种最有前景的替代能源,受到了研究者的广泛关注。太阳能廉价易得,且储量丰富。因此,
本研究基于行为声明,针对应用软件在Linux环境下的行为进行了可信性测试方法方面,可信度量标准方面与可信度计算方面的研究。首先,针对Linux系统特性,分析了软件在运行时的相
目前的图像处理算法大部分都是面向图像数据的向量表达形式。然而,图像数据的向量表示既破坏了图像的内在结构信息,也导致向量化后的数据因为维度过高而引发维度灾难,进而增
Open mHealth技术能够以前所未有的方式在不去医院的情况下收集和分享健康相关信息。根据最近的调查结果,ios应用商店中与健康相关的APP超过13000个,Android应用商店超过6000
唐代是墓誌銘發展的高峰時代,洛陽流散唐代墓誌對深入研究唐代洛陽地區社會風貌、歷史風俗、語言文字等使用狀況等大有裨益。墓誌作爲出土文獻資料能夠補充揭示傳統文獻記載
算法代数与符号计算在数学理论和工程计算中有着重要的科学意义与应用背景,多维矩阵的等价与分解是算法代数与符号计算交叉融合形成的重要方向。本文致力研究赋值环上的特殊线性群与多维矩阵的等价问题,主要包含以下内容:第一,在本文第三章,根据Lam提出来的Hermite环猜想,对赋值环是Hermite环这一开问题进行研究,我们证明了对于任意的赋值环V,w=(f(x),g(x),e(x))∈ V[x]是幺模行向
行政处罚自由裁量权是国家与人民给予卫生行政机关的重要权力,正确行使卫生行政处罚权对于卫生行政执法部门维护公民健康、惩办管理相对人违法犯罪行为具有重要的意义。随着
日本是一个重视诚信、珍惜名誉的国家。二战后的短短几十年间,日本从硝烟与废墟中崛起,开展了一系列的改革,飞速发展,成长为仅次于美国的第二大资本主义经济体。究其原因,可以说教育在其中承载了巨大的推动作用。而随着日本在世界之林的崛起,诚信教育更是其发展的重要保障和依托。从古至今,日本一直推崇和实施着诚信教育。中小学是承载着诚信教育的主要阵地和主要途径。面对全球一体化的挑战,尤其是中国与日本独特的地理位置
随着网络销售的快速普及和物流行业的迅猛发展,大量制造商开始通过线上销售直接面向消费者,并通过与第三方物流服务商的合作来向消费者提供产品,这种借助网络平台和第三方物