基于轮廓的图像检索研究

来源 :上海交通大学 | 被引量 : 1次 | 上传用户:peng23
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社交网络的快速发展,网络上的数字图像信息以海量的方式传播,并仍在以几何级数的方式不断增长。为了满足人们对于图像内容检索的需求,基于内容的图像检索研究正受到越来越多的重视和关注。对于人类视觉系统而言,轮廓是一个非常重要的特征,通过它人类视觉系统可以容易且高效地在场景中识别和区分物体。因此基于轮廓的图像检索具有广泛的意义和实用价值,成为基于内容的图像检索领域中一项重要的研究课题。为此,本论文将围绕基于轮廓的图像检索展开研究,建立一个涵盖图像检索全过程的基本框架,具体研究问题包括:图像检索的不变性及其层次化显著候选区域估计算法、轮廓特征提取算法、数据库的索引和重排序算法。为验证提出模型与算法性能,我们研发了一个基于轮廓的实时图像检索系统技术原型,并在该平台上进行了大量基于轮廓的图像检索实验。本论文的主要贡献和创新点体现在以下几个方面:1.图像的层次化显著候选区域估计。为解决图像检索的位移不变性和尺度不变性问题,本文提出了一种图像的层次化显著候选区域(HSCR)估计算法。该算法能在物体显著图上快速捕获物体可能的显著层次状态,并将之形成候选检索区域,因而能自动为一幅图像提供其显著物体的若干个候选区域,这不仅为检索一幅图像多个层次的内容提供了可能,也为图像中显著物体的位置和尺寸提供了有效估计。此外,基于图像的轮廓和颜色显著,本文还提出了一种图像的轮廓显著图提取算法,它生成的物体显著图能更好地匹配HSCR算法,从而有效地提高图像检索的性能。本文将HSCR算法分别基于不同的显著性检测模型、结合不同的轮廓特征提取算法进行了多组图像检索实验。实验结果表明,检索准确率均大幅度地得到提高,说明HSCR算法确实能有效地提高图像检索系统的性能。2.图像轮廓特征提取。本文提出了一种基于层次化朝向的多尺度特征(HOF)提取算法,该算法提取的特征涵盖了物体从整体到局部的信息,相较于仅仅是局部上高度相似的图像而言,HOF能给予那些整体上相似,但局部存在微小差异的图像以更高的相似度,因此尤其适合于随意性较大的简笔画作为查询图的图像检索。此外,HOF的这种特性还可以被用于快速的数据库索引,以提高图像检索的性能。3.数据库索引和重排序。结合HOF特征由整体到局部的特性,本文设计了自顶向下的数据库倒排索引和从粗糙到精细的重排序算法。这种自顶向下的倒排索引可以将大量与查询图在整体上不相似的图像快速地去除,在基本保持检索效果的同时,大大提升了图像检索的效率。此外,从粗糙到精细的重排序算法,对索引结果进行快速而层次化的重排序,有效提高了图像的实时检索性能。4.针对目前基于卷积神经网络的图像检索在简笔画查询方面的不足,提出了一种基于二值化轮廓图的卷积神经网络图像检索算法。该算法用二值化轮廓图搭建了简笔画和自然图像之间的一个桥梁,建立了它们对图像物体的一致表达,并且通过对自然图像的轮廓二值化,不仅可以得到大量类似简笔画的图像,使得利用轮廓图像训练卷积网络模型成为可能,而且保持了同类物体的简笔画与自然图像在网络层次特征提取的一致性,因此它可以大幅度提高简笔画查询的检索准确率。5.实时图像检索系统的开发。我们设计开发了一个基于百万级别图像数据库的实时图像检索系统iRP,不仅支持基于轮廓的图像检索iRP(Contour),而且为适应一些有颜色要求的图像检索需求,我们还将基于轮廓的图像检索框架扩展,提出了基于轮廓和颜色的图像检索iRP(Contour&Color)。此外,该系统还提供了简笔画、图像(包括二值图像、灰度自然图像、彩色自然图像等)、关键词及其相互组合等多种方式给用户进行查询检索,以带来更好的用户体验。最后,我们从网络上采集了超过一百万张的图像作为实验数据,并设计了多组实验方案,在充分的数据支持下,对基于轮廓的图像检索iRP(Contour)过程中各个环节的不同算法,进行了系统性的对比分析。此外,我们对基于轮廓和颜色的图像检索iRP(Contour&Color)、基于二值化轮廓图的卷积神经网络图像检索也进行了实验对比分析。实验结果表明,我们提出的检索框架及算法,均能实时提供较为良好的图像检索结果。在基于轮廓的图像检索中,简笔画查询方面,iRP(Contour)取得的检索准确率更高,而综合自然图像和简笔画两种查询情况,基于二值化轮廓图的卷积神经网络图像检索的检索准确率要高于iRP(Contour)。
其他文献
分布式发电(Distributed Generators,DGs)是布置在用户附近的小型发电单元,主要包括太阳能发电、风力发电、生物质能发电等,但是它们都有很大的随机性、间接性和波动性,无法对用电单位做到稳定可持续供应电能,DGs接入到大电网时,会对大电网带来冲击,造成一定的影响,为了削弱DGs直接并网的弊端,微电网作为一种新型的电网形式被提出,微电网有两种运行状态:并网模式和孤岛模式。当微电网受
随着互联网的高速发展,人们生活的各个方面都离不开互联网,人们在享受互联网带来便捷生活的同时,也使得互联网数据高速增长。如何快速查询和存储海量数据已成为人们研究的重点,这也使得NoSQL数据库快速发展。比较典型的NoSQL数据存储形式是键值存储,即一个键对应一个值。键值存储系统可以理解为一个可持久化的更大容量的哈希表。存储系统最重要的部分是存储引擎,本文研究了当前最流行的日志结构合并树(LSM-Tr
在科技变革、互联网发展、移动终端融合的当下,媒介融合对播音主持人才培养提出了新要求,也给教学改革提出了新命题。本文主要诠释"两位一体"多维度专业教学改革的突破与创新
通过溶剂热法制备出空心球状的碘氧化铋,采用X射线粉末衍射(XRD)、扫描电子显微镜(SEM)和物理吸附仪等技术手段对样品的结构和性能进行了表征。选用阳离子型染料罗丹明B和阴
本文利用中值定理和区间技术,对目标和约束进行线性下界估计,提出了求符号几何规划(SGP)全局解的分枝定界算法.数值实验表明方法是可行和有效的.
CK2是一种保守的蛋白激酶,它广泛分布于真核生物中,通过磷酸化蛋白底物的丝氨酸/苏氨酸/酪氨酸在很多生物学过程中发挥作用。CK2不同于其它蛋白激酶之处在于它具有组成型活性
手法是中医药治疗退行性腰椎滑脱的特色手段之一,其疗效得到一致认可。从中医学对退行性腰椎滑脱的认识、中医学对手法治疗退行性腰椎滑脱理论及诊疗的认识、西医学对退行性
冠状动脉微栓塞(Coronary Microembolization,CME)是急性冠状动脉综合征(Acute Coronary Syndromes,ACS)患者行经皮冠状动脉介入治疗(Percutaneous Coronary Intervention,PC
土传病害作为植物病害中的一类,主要危害植物的根部和茎部,严重制约了农业生产。随着作物类型单一化种植以及复种指数的提高,该类病害的发生越来越严重。众所周知,土传病害难于防治,尤其是一些复种指数高或多年生的经济作物,例如大豆、棉花、烟草、人参、西洋参及蔬菜等,目前仍以化学防治为主,但防治效果不稳定,而且产生药物残留问题,国家在引导生物产业的发展,尤其是在农业领域,中国土地的确需要微生物产品。本研究开展