基于视觉感知的个性化图像检索的初步研究

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:camino
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数字图像数量的急剧增长,如何高效、快速地从海量图像数据中检索出用户所需的信息是当前图像应用领域的一个重要问题。基于内容图像检索是目前国内外的一个研究热点,其面临的最大难题就是图像低层视觉特征与高层语义之间存在的巨大语义鸿沟。图像检索的根本目的是要为用户提供所需要的服务,满足用户的个性化需求,这也是新一代图像检索技术的发展趋势。 人们在浏览图像时,人眼视觉系统将图像传递到大脑,此时人眼的视觉注意和视点运动表达了人们对图像的喜好或兴趣,这个过程称为视觉感知。为了克服图像检索中的语义鸿沟问题,论文提出一种融合视觉注意模型和视点跟踪的视觉感知技术,希望通过直接感知用户视觉信息,得到客观反映用户语义的个性化兴趣信息,实现基于视觉感知的个性化图像检索。主要工作有: (1)论文首先对基于视觉感知的个性化图像检索的研究意义和课题背景进行了阐述。对现有的视觉感知技术以及个性化图像检索技术的研究现状进行了综述。 (2)依据视觉注意机制,提出了一种基于视觉注意模型和进化规划的感兴趣区检测方法。采用进化规划方法分割图像候选区域,视觉显著度由视觉注意模型产生的局部显著和全局显著共同度量。在返回抑制以及显著度增强因子的作用下,注意焦点选取候选区域得到感兴趣区。这一方法符合人眼视觉注意机制,取得了较为满意的感兴趣区检测结果。 (3)根据图像检索系统人机交互的需求,设计并实现了闪烁红外LED和常亮红外LED两套视点跟踪设备的改造方案。通过对比各类摄像头的性能,选择适合的镜头及LED参数,常亮红外LED方案表现出更好的视点跟踪效果。 (4)结合常亮红外LED视点跟踪设备,提出了一种基于双阈值的低复杂度实时视点跟踪方法。该方法用双阈值法联合定位瞳孔-反射点、几何映射法预测视点位置。与用人脸检测定位人眼的传统方法相比,此方法显著提高了视点跟踪的速度。 (5)基于Web Camera的应用,利用拍摄到人眼图像相邻两帧的相似性,提出了一种自适应模板视点跟踪方法。首先用类Harr特征的快速人脸检测算法和自适应人眼模板匹配方法检测人眼区域,再从人眼区域中心到周边全搜索找到反射点,最后将人眼位置、瞳孔中心和反射点作为BP神经网络的输入矢量预测视点位置。相比传统模板法,提出的自适应模板法人眼定位更准确。 (6)针对图像检索的实际应用——无观察任务和有观察任务两种情况,提出了一种基于视觉感知的感兴趣区检测方法。前一种情况,采用视觉注意模型检测图像的候选感兴趣区;后一种情况,通过收集用户浏览图像的视点信息,计算用户的注视兴趣度,由此产生了客观化的感兴趣区检测结果。经过对比用户的主观评价,所提方法与用户实际兴趣有较高的符合率。 (7)通过分析视觉感知的感兴趣区,用视点跟踪进行相关反馈,构建了一种基于用户兴趣模型的个性化图像检索系统。相比传统MARS方法,经过用户兴趣模型过滤的图像检索结果在查准率和查全率都有明显提高,在一定程度上满足了用户的个性化要求,有效的克服了低层视觉特征和高层语义之间的语义鸿沟。
其他文献
本文主要做了两个工作。第一是分析了基于II型HARQ机制的Turbo编码协作系统的性能,得到了吞吐量的近似求法。协作通信系统网内各终端之间相互合作,组成虚拟的MIMO,取得空间分集
石墨烯是一种由单层碳原子紧密堆积成二维蜂窝状结构的单晶材料,它具有优异的光电和机械性质。由于其特殊的载流子弛豫特性和零带隙能带结构,石墨烯在强激发实现粒子数反转后,带间载流子跃迁产生的电磁波处于太赫兹(THz)波段,这使石墨烯具有能够产生和放大THz波的特性。光/电抽运方式下石墨烯表面激发的等离子体的频率处于太赫兹波段,这是以石墨烯为基础产生和放大THz波的一种重要的方式。本论文基于光/电抽运石墨
光纤倏逝波生物传感技术是一种高灵敏度、可进行远距离实时分析的微量分析技术,在水质监测、食品卫生检测、生物战剂检测等方面有着巨大的应用潜力。其测量原理是通过光纤探
数字水印(Digital Watermarking)技术是目前信息安全技术领域的一个新方向,是一种可以在开放网络环境下保护版权和认证来源及完整性的新型技术,可广泛应用于多媒体版权保护和图
随着全球资源的短缺,人们节能环保的意识日益提升,节能环保的LED照明越来越受到市场的青睐,21世纪将进入以LED为代表的新型固体光源照明时代。制约LED发展的一个技术瓶颈是LED驱
在当今社会,电子产品风靡全球,锁相环作为各种电子产品的重要组成部分,应用在生活的各种领域,它的性能的好坏也显得至关重要。通过阅读大量文献,重点综述了锁相环的发展历程和应用
微孔草(Microula sikkimensis(clarke)Hemsl.)系紫草科微孔草属的两年生珍稀草本油料植物,主要分布在青藏高原及其毗邻高寒农牧地区,青海省是微孔草的主要生产区之一。近年来,微
最近几十年里数字信号处理技术在理论和实践上都取得了突飞猛进的发展。由于具有可靠性高、灵活、成本低等优点,数字信号处理技术逐渐在各个领域代替了传统的模拟信号处理方式
非整倍性染色体数目变异由于打破了生物体基因组剂量的平衡,往往造成丰富的表型变化,在植物遗传改良研究中被广泛利用。然而,由于缺乏合适的研究材料,有关木本植物染色体非整倍性
退耕还林(造林)是当前主要的人类活动之一,对陆地生态系统碳、氮循环影响显著。然而目前退耕还林对土壤碳、氮的研究明显滞后,多数研究针对表层土壤有机碳变化,而缺少对深层土壤