基于FPGA的SIFT图像匹配系统实现与优化

来源 :东南大学 | 被引量 : 2次 | 上传用户:sflljlove
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近十年以来,对图像局部不变性特征的研究一直是图像处理、模式识别等领域的热门研究方向。人们通过经典的数学理论设计和构建图像中具有不变性的局部特征,从而让计算机能够有能力替代人工自动完成某些目标提取、追踪等任务。SIFT算法凭借其对图像旋转、平移、尺度等变换的不变特性,成为图像局部不变性特征研究中里程碑式的工作,广泛应用于诸多领域。然而,由于SIFT算法运行时需要消耗巨大计算量,使其在通用处理器下很难满足诸如视频目标跟踪、实时图像拼接等应用对算法实时性的要求。为了解决SIFT算法运算效率低的短板并且能使其更好地应用于嵌入式设备中,本文提出了基于FPGA的SIFT特征提取、特征描述以及特征描述子匹配的算法加速解决方案。本研究从SIFT算法原理入手,对算法基于硬件实现的改进优化,并充分利用Xilinx Zynq平台ARM+FPGA的结构,最终将算法主体计算部分由FPGA端作并行计算加速,而控制与人机交互部分则在软件端实现。主要研究工作包括:1)针对FPGA硬件可编程特性,对SIFT算法各步骤实现进行调整优化。其中包括采用并行高斯滤波结构生成高斯金字塔,以提高特征提取速率;采用近似比较的方式生成梯度方向与幅值,以减少硬件资源消耗;采用环形特征邻域划分结构进行特征描述,以保证在算法尺度不变性得以落地的前提下提高特征描述效率;采用空间并行穷举匹配的方式匹配特征描述子,以极大地提高特征匹配效率等。2)将基于硬件优化改进后的SIFT算法部署到在FPGA,并调整优化各部分硬件资源消耗。其中包括采用基于RAM的移位寄存器方案作为图像行缓存,以节省LUT资源消耗;采用跨时钟域调度的方式进行梯度数据存取,以减少片上数据缓存压力和提高特征描述效率;采用特征描述子片上乒乓缓存的方式进行描述子匹配,以使特征描述模块与描述子匹配模块充分并行,提高整体匹配效率。流水线设计思想以及空间并行展开技术充分融入每个模块的设计中,从而最大限度地提高算法运行速率。在卫星图数据集上对SIFT算法的各种不变特性进行测试,在保证匹配效果的前提下,匹配两张尺度两张720×480的图像平均耗时20ms,相比软件运算提速40倍。并且,将本系统作用于图像—视频匹配实例,达到了高于25fps的视频处理速率。
其他文献
对于Kennedy空间中心(KSC)的一次典型着陆发射,有多至2000或者更多的轨道飞行器的电动/电子连接器要经受影响线路功能的分离、重新配接和重新测试。每一连接器分离大概要断开
利玛窦作为明清之际传教士,为了在华传教布道而苦学汉语,除了作为一名成功的传教士以外,他还有另外一个重要的身份,即早期汉学家。论文选取利玛窦的两部著作为研究基础,从利玛窦的“文化”传教策略和对汉语的学习与认知方面,细微分析利玛窦作为汉语受教群体,在目的语环境下,是如何接受相关知识,主动探索学习路径。笔者将目标锁定在《利玛窦全集》上下册记载的书信往来内容,其中主要收集并分析利玛窦在书信中流露对汉语的学
耧斗菜属多年生宿根花卉,花型奇特,花色鲜艳、丰富,具有很高的观赏价值,可大量应用于园林中。试验研究不同基质配比对耧斗菜组培苗苗期的株高、株幅、叶片数的影响。结果表明,处理
目的探讨指端缺损采用指背筋膜皮瓣与指动脉岛状皮瓣修复效果。方法收集本院2017年6月至2018年2月收治的指端缺损患者90例(96指)临床资料,按治疗方式分为两组。对照组45例(47指)采用指动脉岛状皮瓣修复,试验组45例(49指)采用指背筋膜皮瓣修复,术后随访6个月,比较两组术后恢复指标,感觉恢复情况、并发症。结果试验组PIP活动度、DIP活动度、血流灌注量分别为(83.65±4.35)°、(7
人类生产生活活动会产生大量的固体废弃物,城市生活垃圾和市政污泥是重要的城市固体废弃物,其来源广、处理量大、组分成分多,对大气、水、土壤、人体健康及资源消耗均造成影
目的:1.观察一例骨性Ⅲ类错颌患者正颌手术后骨骼面型的稳定性;2.观察一例骨性Ⅲ类错颌患者正颌手术后上气道生理的变化;3.观察一例骨性Ⅲ类错颌患者正颌手术后髁突位置的变化。实验方法:选取于山东大学口腔医院正畸科就诊的严重骨性Ⅲ类错颂畸形患者1例,女性,19岁,采用正颂正畸联合治疗,手术方式:上颂Lefort Ⅰ型前徙+BSSRO配合颏成形术。对患者进行手术前正畸治疗,排齐整平,去除胎干扰;正颌手术
芳纶纤维出众的力学特性即超高的比强度、比模量和高韧性赋予了芳纶纤维复合材料优异的物理化学性能,使其在航空器、军工、橡胶、建筑等诸多行业的研究和应用逐渐深入。然而纤维复合材料非均质和各向异性的特点以及其增强体优秀的机械特性共同使得芳纶纤维复合材料的切削加工性较差,机械加工又是其成型后不可或缺的工艺环节,因而近年来对于芳纶纤维复合材加工技术的研究已成为热点,芳纶纤维复合材料近净成形技术水平的不足成为限
杂208是山西省农业科学院棉花研究所选育的高产、优质、多抗棉花杂交新品种。该品种2003—2004年参加山西省南部中熟棉区新品种区域试验,平均皮棉产量1 582.5 kg/hm2,较对照