基于深度迁移学习的直线特征描述算法研究

来源 :河南理工大学 | 被引量 : 1次 | 上传用户:hzfjl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
局部图像特征描述算法是图像匹配技术的核心算法,不仅被广泛应用到宽基线匹配、图像检索、图像拼接、3D重建等计算机视觉任务中,还被应用到产品质量检测、指纹解锁、自动工件检测等实际工程应用中。局部图像特征描述方法是把局部区域描述成一个具有唯一性的特征描述子。一个鲁棒的描述子应该对于匹配块不会因为视角、光照、旋转、模糊和噪音等的变化而变化,同时对于非匹配块要保持不同图像块之间的区分性。近年来,随着深度学习在计算机视觉的成功应用以及大规模的特征点描述数据集的出现,局部特征点描述子的研究取得了突破性进展。然而,对于直线特征描述算法的研究,由于缺少大规模标注数据集以及直线因端点、长度的不确定而造成的难以统一表达等原因,局部图像直线特征描述算法的研究仍停留在手工设计的阶段。受直线特征描述子MSLD的启发,本文将图像中的一条直线表示成由直线上所有点的邻域计算出的一个均值块和标准差块,将直线的特征描述转换为类似于点的特征描述,从而将深度迁移学习技术应用于直线特征描述算法的研究,解决了直线特征数据集不足和难以统一表达的问题。本文将全卷积神经网络和深度迁移学习相结合,提出了两种基于深度迁移学习的直线特征描述算法,其主要的研究工作包括如下三点:(1)构建了用于训练深度神经网络的直线特征数据集基于深度迁移学习的直线特征描述算法研究,一方面需要已有的特征点数据集,另一方也需要构建新的直线特征数据集。为此,本文通过手机拍摄或网络下载的方式构建了两个高质量的直线特征数据集LFpatches和GDLFpatches。数据集包括约3400对不同光照、模糊、视角、旋转、JPEG压缩、噪音和尺度变化图像,共约138000对不同的均值块和标准差块。(2)基于深度迁移学习的直线特征描述算法T-MSLD为了提高直线描述子在大量图像变化上的稳定性和鲁棒性,本文提出了一种基于深度迁移学习的直线特征描述算法T-MSLD。首先,参考特征点描述子的深度学习网络L2-Net,建立了七层的卷积神经网络,作为直线特征描述子的训练网络。其次,使用预训练的L2-Net的网络权重对网络参数进行初始化。再次,选择三元组边际损失作为损失函数,并使用自建的直线特征数据集对网络参数进行微调和优化。最后,将T-MSLD用于特征匹配任务,实验结果表明本文提出的T-MSLD在召回正匹配总数和平均精度均值(mean Average Precision,m AP)两个评价指标下都优于已有的手工设计线特征描述子MSLD和IOCD。(3)基于FCNNS和深度迁移学习的直线特征描述算法为了让深度卷积网络既能学到局部的特征变化又能学到全局的特征,进一步提高模型的泛化能力和直线特征描述子的质量,本文使用中心-环绕(Central-Surround)对模型的输入数据进行数据增强,同时深度学习网络架构选择全卷积神经网络,应用迁移学习完成了基于FCNNS和深度迁移学习的直线特征描述算法的研究。本文研究了三种全卷积神经网络架构,即是中央环绕孪生网络(Central-Surround Siamese network,CS S-Net)、中央环绕伪孪生网络(Central-Surround Pseudo-Siamese network,CS PS-Net)、中央环绕双通道网络(Central-Surround 2-Channel network,CS2-Channel-Net)。实验表明三种模型都优于现有的手工设计描述子,特别是在模糊变化、视角变化、旋转变化和尺度变化上取得了显著的性能提升。
其他文献
图像匹配是计算机视觉中的一个重要研究方向,现有的数字图像匹配方法大致可以分为两种:第一种是基于灰度信息的匹配方法,第二种是基于特征的匹配方法。基于特征的匹配方法一直是计算机视觉领域中很多应用的关键技术,包含点匹配、线匹配等。在基于特征的图像匹配中,线特征比点特征包含更多的结构信息,并且在人造对象和环境(例如城市建筑物和道路)中,线特征大量存在。但由于提取的直线经常出现断裂、不完整等情况,与点特征描
学位
使用计算机仿真技术进行经济仿真是现代经济学研究的常用手段,其中基于系统工程的系统动力学方法是经济研究尤其是区域经济仿真和社会经济系统仿真的重要方法。传统的系统动力学方法将研究区域作为一个整体,对其进行系统建模并仿真,这种方法忽略了区域内部实体之间的联系和交流,而区域内部实体之间的关系,也就是区域经济的空间关系对于区域经济的发展有着重要影响,因此基于对系统动力学的空间仿真功能的拓展,本文设计实现了一
学位
大数据蕴含大量信息,具有极高的潜在使用价值。人们在享受大数据带来便利的同时,也受到大数据隐私泄露的安全威胁。大数据隐私泄露本质上是数据安全保护的问题。目前,在大数据的整个生命周期内,数据安全保护的关键是如何安全计算和安全检索。同态加密可以在不需要解密的条件下对密文进行运算,运算结果与直接对明文运算等同,为大数据隐私保护提供了一种理想的解决方案。论文基于同态加密,针对大数据实际应用中安全多方计算和安
学位
随着输油管道工业化的发展,焊接水平的提高,X射线无损检测技术被广泛的应用于管道焊缝缺陷检测中。目前缺陷检测主要是评片专家通过肉眼观察识别出管道X射线底片中的焊缝缺陷,这种方法一定程度上制约了缺陷的检定效率和识别准确率。随着计算机技术水平的不断提高,使计算机对焊缝缺陷进行识别成为可能。本文在输油管道焊缝缺陷X射线图像的基础上,对焊缝缺陷的检测与识别方法进行研究,设计出一个可以对焊缝缺陷进行自动化识别
学位
近年来,随着全球信息化的高速发展,云计算技术和云存储应用已经成为人们生活中重要的组成部分,人们越来越喜欢将自己的一些数据存储在云服务器上,但是往往这些数据中会包含许多用户的电话,身份证号,工作单位等隐私信息。在如今的互联网环境下,用户很难去和云服务器建立一个稳固的信任关系,这个时候使用一些加密技术就可以很好的来解决这个问题。基于属性的加密是将用户的身份使用一组属性集合来代替,如果密文或用户私钥的访
学位
随着网络通信技术的飞速发展,互联网承载的文本信息呈现出爆炸式增长的趋势,面对这些数据量庞大且杂乱无章的文本信息,如何有效的分类和筛选,进而提取其中有价值的信息是当前文本挖掘领域研究的热点问题。近年来,深度学习技术在文本分类领域的优势愈显突出。相比于传统机器学习方法,基于深度学习的文本分类方式在处理海量数据时省去了复杂的特征提取过程,能够高效地解决问题,展现出广泛的应用前景与价值。本文以深度学习为基
学位
理清国有企业党委研究讨论作为董事会、经理层决策重大问题的前置程序时的权责边界,即党委研究讨论的前置程度与研究深度。并且厘清不同事项的决策程序,帮助国有企业更好的把党的领导融入公司治理各环节、内嵌到公司治理结构之中,既能保证企业议事决策程序高效运转,也能确保党组织在企业重大事项上决定权、把关权、监督权的落实。
期刊
随着云计算、服务计算的发展和移动互联网技术的逐渐成熟,服务多样化、社会化的趋势日益明显。为了满足用户的高度定制化服务需求,各种各样的信息服务需要通过跨界融合形成错综复杂的协作关系网络。在这种背景下,服务生态系统应运而生,典型的应用实例包括软件服务生态系统、云制造服务生态系统、电子商务服务生态系统等。然而,服务生态系统内部的组成要素多样,相互之间又存在外部的竞合博弈关系,相互关联的内部自然演化及外部
学位
以烟草Nicotianatabacum抗旱品种NC82和干旱敏感品种云烟87幼苗为材料,利用PEG-6000对幼苗进行干旱胁迫处理,研究干旱胁迫对烟草不同品种Fv/Fm、SOD活性、POD活性、MDA含量等生理生化指标及NtDEGP5基因表达的影响,为进一步开展NtDEGP5基因的功能研究提供依据。结果表明,干旱胁迫对烟苗的Fv/Fm、SOD活性、POD活性、MDA含量有影响,随着干旱的持续,Fv
期刊
长读数因为在跨过基因组重复区方面具有卓越的表现,因此逐渐得到了广大研究者的青睐。通过分析和挖掘测序技术产生的长读数的数据特征,研究基于长读数序列组装方法,实现高速度、高准确性、高连续性的基因组组装,对支持和推动生命科学中一系列重要的基础性研究具有重大意义,如:基因层面的疾病确诊;发现潜在疾病的发病风险;对个体化用药提供指导;指导生育健康的下一代等等。但是来自第三代测序技术的长读数,虽然测序长度长,
学位