基于多任务CNN的实例感知图像检索技术

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:liang6666
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网和数字媒体的普及,图像、视频数据逐步成为网络不可或缺的资源,对多媒体时代的海量图像有效存储和高效检索是我们当前面临的机遇和挑战。在这一挑战中图像哈希技术将高维数据映射成低维二进制哈希码是关键。哈希码的质量取决于图像哈希算法中哈希函数的设计和图像表征的有效性。基于人工提取的图像特征对图像的表征能力有限,在实际使用中结果并不理想。哈希函数的设计也很难适用于多个数据集。近年来,计算机视觉、深度学习迅猛发展,基于深度学习自动学习数据特征的方式逐渐代替原有的人工获取,实现了更智能更自动化的特征提取方式。将深度学习技术和哈希编码技术相结合是当前图像哈希技术的主流研究方向。在深度图像哈希技术中,寻找、探索更有效的卷积神经网络结构和优化算法是研究热点。根据国内外学者对深度学习图像哈希技术现状的研究和分析,本文主要对图像检索的深度图像哈希技术进行了分析和实验,工作如下:针对现存的以图搜图系统中自动化和智能化水平低、缺乏人工智能技术支撑、难以获取精确的检索结果、检索系统耗费计算机内存、实时性等难以满足多媒体时代下海量图像的检索需求。依据问题提出了一种多任务级联分层图像检索方法。首先利用选择性检索网络在特征图上进行逻辑回归得到图像中各感兴趣区域概率向量,在此基础上结合紧凑量化网络对其进行编码得到图像紧凑量化哈希码;其次利用再次筛选网络获取各感兴趣区域响应最大的区域感知语义特征;接着对每个感兴趣区域进行基于量化哈希矩阵的精检索策略对图像进行快速比对;最后选出与查询图像中的对应感兴趣区域最相似的图像。提出的多任务学习方法既能同时得到图像紧凑量化哈希码和区域感知语义特征,还能有效去除图像背景和其他对象信息的干扰。实验结果表明:本文方法能实现端到端的训练,自动选出更高质量的感兴趣区域特征提高了大规模图像检索智能化水平,检索精度(0.9478)与检索速度(0.306s)均明显优于现有大规模图像检索技术。针对已有车辆检索中缺乏智能化、检索结果无法满足实际需求等问题,提出了一种基于多任务网络,针对细粒度数据集提取图像的分段紧凑特征的卡口车辆检索技术,充分使用车辆图像的多样性与关联性完成道路卡口的在线检索。首先,结合相关任务中的联系改善检索系统精度,降低多标签特征之间的耦合,提出的多标签分段学习策略将语义特征和多标签相结合,获取车辆图像不同属性的二进制哈希码;随后利用最小化图像编码增强图像表征的鲁棒性;然后,采用特征金字塔网络图区车辆图像的实例特征;接着,设计局部敏感哈希再排序算法,对以上特征进行图像相似度匹配;最后,针对缺失或缺损检索车辆的特殊情况,使用跨模态方法辅助检索。在三个公开数据集上使用本章提出的检索方法,检索精度均优于目前主流的车辆检索算法。其中,CompCars车辆数据集的检索精为0.966。VehicleID中提升至0.862。该方法将最小化图像编码和图像实例特征融合获取了高精度高时效的检索结果,且在缺失或缺损车辆图像时可实现跨模态检索。
其他文献
抗冻蛋白(antifreeze protein,AFPs)是一类能降低溶液冰点,修饰冰晶形态,抑制冰晶重结晶的蛋白质,它在冷冻食品中具有良好的应用前景。本课题以冷冻面团馒头和抗冻蛋白为研究对
《共进》杂志是始于1921年10月,由陕西籍旅京进步学子李子洲、杨钟健、刘天章、刘含初等人开办的刊物,在1922年共进社成立后,它继而变为了共进社的机关刊物,最终于1926年被迫停刊,是五四时期出版时间较长的刊物。《共进》杂志主旨在于“提倡桑梓文化,改造陕西社会”①,具有浓郁的地方特色。在五年的时间里《共进》杂志共出版了 105期,其中涉及的内容主要包括思想启蒙、教育改革、反帝、反封建及反军阀思想
李咏:首先是优秀李咏,一个“异类”主持人。从天生的相貌,到他自己设计的花哨西服和一头蓬松的卷发,再到脸上永远都挂着的那标志性笑容,都是他独特风格的体现。
2006年的中央经济工作会议对明年的经济发展提出了“又好又快”的新要求,并强调必须做到“三个协调”,即速度、质量、效益相协调,消费、投资、出口相协调,人口、资源、环境相协调
每天下午,一曲悠扬的古典音乐响起在干峰南路小学的上空时,全校师生自然而然地进入国学课堂。在短短的20分钟内,孩子们时而齐声朗诵,时而聆听讲解,时而细心体会,力争在课堂上背会当
近几年总省行高度重视思想政治工作,并就如何开展和强化各级行的思想政治工作,提出了明确的和更高的要求,但思想政治工作如何开展才能深得民心,取得并达到预期目的,仍是一个难点问
近年来,厦门市版权局围绕为经济建设服务、为产业发展服务的目标,以加强版权行政执法和保护、提高社会公众版权意识、促进版权产业发展为重点,积极推进版权管理各方面的工作,
国务院批准实施的《全国海洋经济发展规划纲要》明确提出“建设海洋经济强国”的目标。福建省人多地少,海域面积大于陆域面积,各类海洋资源居于全国前茅,因此福建省发展海洋经济
21世纪是创新知识的世纪,教育特别是中学教育是培养创新人才、建立创新思维的关键。中学阶段是学生思维能力与思维品质形成的关键阶段,因此中学教学、素质教育中创新思维的培养