基于SoC的图像配准融合加速系统设计与实现

来源 :北京理工大学 | 被引量 : 0次 | 上传用户:lz3163
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文基于Xilinx SoC平台设计并实现了一种图像配准融合加速处理系统。系统包括图像配准融合加速逻辑、图像采集与显示接口、数据管理应用程序,并使用Xillybus IP实现系统软硬件桥接。系统采用软硬件协同设计的思想,将图像处理算法与数据接口置于FPGA逻辑中实现,利用其并行、灵活的特点,尽量缩短计算时间与数据延迟,提高系统的实时性;硬件平台上搭载了Linux Ubuntu嵌入式操作系统,使系统拥有方便友好的开发界面。该系统最终实现了图像配准与融合实时处理的加速应用。本文的主要工作可被总结为以下几个方面:首先,本文分别设计了傅里叶梅林图像配准与拉普拉斯图像融合算法的硬件加速IP,并实现了两者整合。在配准部分的水平方向,为了增大数据吞吐能力,所有数据通道采用了全流水设计,并配有简单独立的数据通道控制器;底层数据通道划分3个独立时钟域,利用双口FIFO或Block RAM保证数据同步;在垂直控制上,底层数据通道控制器采用“扁平化”的管理机制,顶层模块通过组合底层流水线实现算法流程。本文以“自顶向下”和“自底向上”方法,分别完成了架构设计、功能划分,以及各数据通道实现与系统集成。融合部分也采用类似思想,并通过适当的边缘处理改善了融合质量。配准与融合分开设计,独立验证,整合一体,实现了架构与部分资源共享。其次,系统实现了图像数据接口功能。采用MT9V034图像传感器实现双路数据采集,设计了对比度增强模块,结合ADV7511驱动逻辑实现视频HDMI显示;设计并实现了I2C总线的Master端接口逻辑,用于完成相关芯片的配置。另外,MT9V034数据通道逻辑保证了采集起点的正确性,ADV7511时序驱动逻辑还实现了“帧数据自动对齐”功能。最后,为了使系统能够实时流处理,本文编写了相关软件应用。该部分在Linux多线程环境下,根据设计的软件处理架构,采用C语言完成开发,用于保证数据流在FPGA各个加速子系统与接口逻辑之间的有序处理。本设计的创新点包括:在FMT配准算法策略方面,以互功率谱的局部能量中心代替传统最大值位置,并采取由粗到精的方法,以较小处理时间和资源消耗的代价完成精度的大幅提升;在配准与融合加速逻辑设计方面,提出了一种“基于数据流分割、顶层垂直控制、本地互联、模块设计”的架构设计方法,为资源与速度的平衡、算法串行与并行的矛盾提供了一种解决思路。系统完成了256x256大小图像的配准融合加速处理。单就配准逻辑而言,在消耗较少资源的前提下,处理耗时小于10ms,相比MATLAB方法提高了两个数量级;尺度和旋转精度分别达到0.006和0.1°,平移误差小于一个像素,优于传统算法的软件实现。融合部分逻辑的处理时间不到1.5ms,并能实现较高的融合效果。配准与融合整合后可以将时间减少到11ms,并通过复用节约了存储资源。加速应用以命令形式调用,软硬件集成后系统采用数据源同步的方式,处理速度达到60FPS,且实现了采集图与融合图的HDMI显示。
其他文献
砜基化合物在医药、农药、材料科学以及有机合成等方面有着广泛的应用。向化合物中引入砜基,在有机合成领域具有极高的应用价值,随着金属催化、光催化等方法的发展,多种不同的合成策略被用于砜基的引入。本文围绕烯烃和炔烃在有机相和水相中的砜基化展开工作,对磺酰氯作为砜基源参与反应进行了研究,具体工作如下:首先,研究了磺酰氯与烯烃在有机相乙腈中的反应,虽然分离得到的产物是混合物,包含了β-卤代砜产物和乙烯基砜,
中职学校电子商务物流课程是电子商务专业的专业核心课程。电子商务物流课程具有较强的实践性。要求学生们在学习电子商务物流课程后,能够独立完成电子商务物流技术的基本操作,如:保管装卸、库存管理等。能够解决在工作中出现的电子商务物流领域相关的基本问题,如:仓库合理配货,如何顺利完成调度与运输衔接等操作。教育部在2019年的6月有关职业院校培养专业人才的指导意见要求:对教师、教材和教法进行深化改革。要求职业
融资融券对股市的影响一直以来在学界存在争议,2015年股市的巨大波动使得融资融券又成为了热点话题,有学者认为是融资融券导致了股市的暴涨暴跌。十三五规划中提出要加快金融
21世纪,随着世界经济的发展,能源危机和环境污染已成为当今世界发展的两大难题。以清洁能源、可持续发展和高科技为特征的新能源汽车的到来,为世界各国的发展带来福音。我国
在经济全球化浪潮下的今天,互联网经济发展的也尤为迅猛,而互联网金融理财作为新兴产业也逐渐被大家所接受,所熟知。互联网金融理财利用网络信息技术与金融理财结合成互联网金融理财这一新兴产物,其为我国经济体系建设提供了重要的作用。它的优势及特点有:参与门槛低、高收益性、融资量大、操作流程方便且快捷、产品的流动性强等。如此来看,互联网金融理财产品的出现改变了传统的货币销售流通渠道,并以其自身的便捷性以及高收
在掌握语言学习的四种技能之中,听力常常被认为是最难提高的一项技能。它是人类信息交流的基本形式之一,也是人们用来获得信息的重要手段、用来提高语言交际能力的中心环节。自2010年起,日本语能力测试开始改革,听力部分占比增加到三分之一,对以取得日本语能力测试N3等级证书为毕业标准的中职日语专业生而言,听力已经成为了不可忽视的重要部分。在进行某项听力理解活动时,它的实质其是一个对获取的信息进行加工处理过程
高速列车牵引系统的核心装置是牵引变流器,IGBT是牵引变流器的核心部件,素有“高铁心脏”之称,广泛应用于我国高速铁路电力机车上。与其它变流器相比,高速铁路牵引领域的变流器功率波动大、工作环境较为恶劣,这些特点使得高速列车牵引变流器IGBT更容易磨损,发生故障,这对我国高速铁路安全运行构成了威胁,因此对其可靠性进行评估具有相当重要的意义。本文以高速列车牵引变流器IGBT为研究对象,对其可靠性进行分析
在现代轨道交通工程中,动力学数值模拟已成为研究车辆轨道动力性能的主要研究手段之一。随着车辆运营,轮轨关系会出现恶化,轮轨局部不平顺、钢轨波磨和车轮多边形磨耗等轮轨短波不平顺在轨道交通系统中较为常见。轮轨短波不平顺会导致轮轨系统出现中高频振动响应,这对轨道车辆动力学仿真计算的可靠性提出了更高要求。因此,对轨道车辆动力学仿真模型展开深入研究具有十分重要的理论和现实意义。本文结合某地铁线路现场试验数据,
《幼儿园工作规程》强调幼儿教育应以“游戏为基本活动形式”,区域游戏又称区域活动是以幼儿自主活动为主要形式,区域活动中教师不仅要把幼儿当做活动的真正主人,更应该以游戏的形式基本实现教育目标。随着时代的发展,阅读能力逐渐成为个人一切能力的根本,幼儿时期的阅读能力是一个人学习的启蒙和开端,因此阅读区活动近年来也备受关注,作为培养幼儿阅读能力的重要载体,阅读区活动离不开教师的有效指导,教师的指导行为是幼儿
本文“全数字高速调制解调器速率转换技术研究”是设计“全数字高速调制解调器”的关键课题。随着信息时代的到来,在军用卫星通信领域,军事卫星、侦察卫星、资源探测卫星等的