基于FPGA的双目视觉系统研究

被引量 : 0次 | 上传用户:zsk1370826
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双目视觉是计算机视觉领域的重要研究课题之一。双目视觉基于仿生学的原理,利用位置不同的双摄像头对场景进行拍摄,从得到的双目图像中获取三维信息。相比于与其他的三维信息获取方法,双目视觉具有设备简单、功耗较低的优点,因而在机器人自主导航、人机交互等领域都有重要的应用价值。但是,双目视觉系统所涉及的算法往往比较复杂,计算量大,基于传统的通用处理器无法满足实时处理的要求。本文针对实际应用中的实时性和准确性需求,利用FPGA(现场可编程门阵列)作为计算平台,综合考虑软件算法和硬件实现,实现高性能的双目视觉系统。利用双目视觉获取的三维信息包含两个方面:场景的三维结构和相机自身的三维运动。对应地,本文选取两个基本任务进行了研究:双目匹配和双目定位。其中,双目匹配算法通过建立双目图像之间的空间对应关系,从单帧图像中恢复出场景的深度图。双目定位则进一步考虑了时域相关性,从连续拍摄的双目图像序列中反推出相机的运动轨迹,对于移动机器人平台的自主导航具有重要意义。针对单帧图像的深度图恢复问题,本文首次在FPGA上实现了结合可变支持域和半全局优化的双目匹配算法。在FPGA结构方面实现了支持混合并行的半全局优化结构,并提出了行分割的策略降低缓存容量,最终搭建完整的深度图采集系统。实验结果表明,本文系统在Stratix V FPGA上的的处理速度达到1600×1200分辨率@42fps,在Middlebury测试集上的准确率达到现有FPGA相关工作的最高值。此外,本文在实际场景中对所提出的深度图采集系统进行了测试,实验结果表明,本文系统在实际场景中仍然能够获得准确的深度图。在深度信息的基础上,本文进一步研究了基于双目视觉的实时定位系统。本文通过软件可编程矩阵运算平台的方法解决了复杂算法流程的FPGA映射问题,首次在FPGA平台上实现了完整的视觉SLAM(即时定位与地图构建)系统,并在室内场景下对系统的性能进行了测试。实验结果表明,本文基于双目视觉的定位系统能够实时(>30fps)处理包含28000个特征点的全局地图,在室内环境下(可视范围3-4m)定位精度达到厘米量级。本文指出未来可能的研究方向包括:三维场景融合、基于深度信息的环境理解等。
其他文献
我国近十几年来的经济增长创造了世界经济发展史上的奇迹,政府投资在其中功不可没。在当下经济增长放缓的同时,如何提高政府投资的效率是学术界讨论的重点。利用28个省份9种
我国4G牌照的发放将给普通百姓和企业信息化应用带来巨大变化。通过详细分析4G网络下一些潜在业务的应用特征,研究了各行业的新一代移动业务,具体包括:助力"智慧水利"建设和
目的探讨腹腔镜与开腹手术治疗子宫肌瘤的临床效果。方法选取2012年1月至2013年1月间我院收治的80例子宫肌瘤患者,随机为观察组和对照组,每组40例。观察组患者采用腹腔镜手术
<正> 患儿,女,3岁,以反复发作性咳嗽,喘气,贫血伴不规则发热三月余于1980年6月22日入院。患儿于1980年3月上旬起多次因阵发性突然咳嗽、喘气、呼吸困难、口唇青紫、面色苍白
运用大量的社会学和流行病学资料,对男男性行为的概念、男男性行为与男男同性恋的区别与联系、男男性行为研究现状、男男性行为的方式、男男性行为对艾滋病流行的影响、男男
目的探讨心理护理对颅内肿瘤患者围手术期心理健康的影响。方法 2013年4月至2014年4月间收治的82例颅内肿瘤围手术期患者,按随机数字表法分为观察组和对照组,每组41例。对照
为了研究脱皮马勃Lasiosphaera fenzliiReich.子实体的化学成分,通过石油醚索氏提取、硅胶柱色谱、葡聚糖凝胶色谱、重结晶分离纯化,从脱皮马勃子实体中分离得到了6个化合物,
目的探讨急性心肌梗死患者入院时血浆NT-proBNP水平与预后的关系。方法连续入选因急性心肌梗死住院的患者236例,其中142例行经皮冠状动脉介入治疗,其余患者行溶栓治疗。入院
服装热阻是热舒适研究中十分重要的物理参数,直接影响人体对热环境的要求,但我国现有的热舒适标准中没有给出服装热阻计算的方法,而ASHRAE Standard 55与ISO7730等国际标准中
新时期,高校基层团组织的传统工作模式受到挑战,共青团的组织功能呈弱化趋势。地方师范院校基层团组织因学校人才培养目标和模式的转型而遭遇双重压力和挑战。主动参与学校综