RGB-D图像本征分解及深度优化

来源 :天津大学 | 被引量 : 0次 | 上传用户:woshishaoqiaolin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本征图像分解问题旨在将输入的图像分解成几张组分图像,这些组分图像分别描述输入图像中物体的材质特性、光照的效果,反映出图像中真实的物理世界。最普遍的分解方法是将图像分解成一个反照率图像和一个亮度图,分别反映物体本身的反射特性和场景中每个位置的光照信息。如果能够可靠地估计场景中所有物体在光照不变下的材料特性,很多计算机视觉和计算机图形学方面的算法的性能将会大大提升。然而,由于这个问题的不适定性,对于单张图像的本征分解算法的发展十分有限。与此同时,近年来,随着深度相机如Kinect的普及,获取深度信息更加便利,研究者们开始利用深度信息研究计算机视觉算法,如姿态识别、场景理解等。目前,利用TOF相机和微软的kinect采用红外测距来获取到的深度信息,往往在边缘和遮挡处产生空洞,分辨率较低。因此,为了使获得的深度图像更加准确、便于使用,对深度图像的优化成为一个热点问题并且得到广泛研究。虽然目前有不少方法用于提高深度相机获取的深度图像的质量,但是还是存在着一些问题,如受彩色图像颜色纹理的干扰,很大程度上限制了深度优化算法的性能。本文提出一种针对单张RGB-D图像的本征分解方法。对于单张RGB图像及其对应的初始深度图,首先分解成四个部分:反照率(reflectance)、直接光照(direct irradiance)、其他光照(other irradiance)和光照颜色(illumination color),然后由后三者合成亮度图(shading)。对于反照率成分,本文提出的方法使用了稀疏先验和非局部先验,充分利用自然图像中反照率和亮度图的稀疏性,以及图像中非局部的结构相似性。由于亮度图主要由平滑的区域构成,因此它的梯度是稀疏的,从而使用L1范数对亮度图的主要成分——直接光照进行建模。最终,利用增广拉格朗日乘子法的交替方向框架(ADM-ALM)进行求解。实验结果表明,本文提出的方法在真实数据集和合成数据集都实现了良好的分解效果,并且对噪声具有鲁棒性。在得到本征分解结果之后,针对场景中不同地方的特性,利用反照率图(reflectanc)和亮度图(shading)联合优化初始深度,使得优化之后的深度图拥有更多的几何细节,同时避免纹理的干扰。论文的工作成果及创新点如下1.在反照率图和亮度图的约束项中同时应用了稀疏先验,并设计了1范数的约束项。从观察和统计分析的角度分析得出反照率和亮度的局部差异满足拉布拉斯分布这一结论。2.设计了一种基于双边滤波加权的非局部先验应用到反照率的平滑项中,使得本文提出的方法可以充分利用反照率图中结构一致性,通过使用非局部的结构相似形,解决了之前方法中存在的短视问题,即一个点的约束项是通过与整张图中的随机像素连接来建立,并且它们之间的权重是基于每个点及其周围的点来决定而不是仅由两个点自身的像素值决定。3.基于本文提出的本征图像分解,设计了十分有效的深度图优化方法,在获取更高质量的深度图的同时,很大程度上避免了之前方法中存在的彩色纹理信息干扰问题。
其他文献
商家信誉维度是评价商家信誉的基础,但虚假评论信息严重干扰了用户关心的商品特征指标.提出了一种基于主流特征观点对的可信商家信誉信息特征维度的构建方法:首先基于依存句
本文作者结合多年工作经验,主要针对影响沥青路面平整度施工的因素进行了分析,并有效的提出了一些改善和提高沥青路面平整度的施工技术与质量控制措施,供同行参考。
当前,随着工业生产制造技术与大数据、云计算、人工智能新一代信息技术的深度融合,现代工业正朝着数字化、智能化等方向飞速发展。但是,工业化与信息化深度融合的同时,工业控制系统自身的封闭性被打破,加之工业控制系统信息安全防护技术发展较为缓慢,工业网络信息安全问题愈发突出。入侵检测作为一种可以实时监测和保护工业系统信息安全的技术,受到众多研究人员的青睐。入侵检测就是通过对采集到的行为信息进行分析,从而做出
目的:观察自体外周血造血干细胞移植治疗恶性淋巴瘤的临床效果。方法:选取恶性淋巴瘤患者58例进行分析,随机分为两组。观察组给予自体外周血造血干细胞移植治疗,对照组给予常规
提出了以EP4CE30F248NFPGA为核心的SOPC实验教学平台设计方案,介绍了平台的硬件组成和软件开发工具,以定时中断为实验案例介绍了SOPC实验的具体流程。该平台由核心板、底板和
近年来,对农村-城市流动人口问题的研究主要集中于成年群体。随着移民人数的上升?移民在城市里居留时间延长,流动儿童日益成为移民潮中重要组成部分。城市里的大量随迁子女,特别
陆丰13-1油田13H井是一口裸眼长、水平位移大、多目标的套管开窗侧钻水平井。针对13H井的特点,介绍了从井的工程设计、施工难点分析到实施的工艺流程、技术措施及施工工程中出
针对准噶尔盆地腹部侏罗系碎屑岩储层流体含量精细化评价难度大的问题,通过试验数据分析,对录井参数进行刻画,利用核磁定量化参数及岩心流动试验精细刻画储层流体含量,显微荧
由于血压时间序列数据受到多种因素影响,具有时变性、非线性和非平稳性特征,因此利用单一的时序预测模型难以准确描述血压的复杂变化规律.为了提高模型的预测精度,本文提出一
用亚硝基胍对产氨基酰化酶的米曲霉(Aspergillus oryzae)3042进行诱变,经过筛选获得诱变菌株3042-5,再进行自然分离后得到了一株高产菌株3042-5-5a,其自由酶活力提高了215-7%-采