基于Kinect的盲人室内智能辅助行走系统设计与开发

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:hustsmes
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,盲人的导盲工具以导盲仗为主,但是导盲仗功能过于简单,无法为盲人提供更丰富的场景信息,盲人往往会因为无法预测前方场景的具体情况,心里产生一种对未知环境的恐惧从而减少自己的出行活动。为了帮助盲人克服心理障碍,提高生活质量,本文基于Kinect设计并开发了一套盲人智能辅助行走系统,具体实现了避障、导航及目标识别三大功能,能向盲人反馈障碍物信息及场景内容,让盲人在行走过程中,全面整体地认识空间布局,减少心理恐惧感。本文主要研究内容如下:(1)结合安全识别区与形态学去噪的障碍物提取,及基于动态时间规划(Dynamic Time Warping,DTW)算法的楼梯检测。首先检测Kinect的有效测距范围及测距精度,以此为基础在盲人身前构建一块安全识别区,提取安全识别区内的障碍物并绘制二值图像,然后利用形态学的方式去除障碍物图像中的杂斑,减少伪障碍影响,提高真实障碍物的检测精度。除此以外,针对目前避障系统中,较少有对楼梯检测的情况,利用DTW算法将场景深度图与楼梯深度图的深度波形进行匹配,检测楼梯的存在,提示盲人是否需要上下楼梯。(2)基于词袋模型的定位标签识别与基于深度学习Single Shot Multi Box Detector(SSD)的场景目标识别。针对Kinect中缺少定位芯片的缺陷,设计并制作定位标签,不同标签代表不同地点,利用色彩阈值分割和词袋模型检测并识别标签内容,获取位置信息;针对目前导盲系统中较少对识别目标进行三维描述的问题,利用SSD算法识别场景内目标,然后结合深度图像,将目标的二维信息还原成真实场景中的三维信息,实现对目标的种类及相对于盲人具体位置信息的反馈。(3)提出一种考虑行走难度的改进A*室内路径规划算法实现室内导航。首先根据室内布局绘制室内平面地图,本文将室内平面地图设计成格网形式,分为可行走区域、不可行走区域及定位标签区域三大块,并以盲人的步长为单位设计比例尺,便于重构移动代价函数;然后考虑转向及路径宽度这两个影响盲人行走的阻碍因素,将其引入到A*算法的移动代价函数中替换原来的曼哈顿距离,可搜索到更宽敞,更适合盲人行走的路径,再结合标签定位即可实现室内导航。
其他文献
"互联网+"已成为国家发展战略,我们要以发展"互联网+农业"为契机,推动智慧农业、智慧农村建设。本文分析了"互联网+农业"的存在问题,提出了政府应采取的对策措施。
“魔兽世界”是一款风靡全球的大型多人在线角色扮演游戏,《血与荣耀》是众多描述“魔兽世界”的小说之一。《血与荣耀》塑造了众多让读者深印脑海的游戏人物形象,从而架构了
如何在传统地区进行现代建筑的设计,是人们关注已久的问题,汲取传统地区的地域文化、符号、材料、技术等元素,经过抽象与转化,体现于本地区现代建筑的传承手法,将会为地域文
目的:探讨复方独正杆接骨膏外敷对桡骨远端骨折愈合的促进作用。方法:采用随机数字表法将68例桡骨远端闭合性骨折患者随机分为治疗组和对照组,各34例。治疗组采用复方独正杆接
蒸养砖是建材行业中非常常见的一种墙体材料,使用量巨大,用途广泛,无论是在生产、运输上都需要消耗大量的人力资源。抱砖机是这些成品砖制造工厂和建筑工地常用的一种机器,它
超广谱β 内酰胺酶 (ESBLs)是由质粒介导的能赋予细菌对多种 β 内酰胺类抗生素耐药的一类酶 ,它主要由革兰阴性杆菌产生。自从ESBLs和产ESBLs的细菌被报道以来 ,产ESBLs菌株
目的 探讨能消除脂质与葡聚糖双重干扰的血清总蛋白测定方法。方法 用氢氧化钾代替Doumas法试剂中的氢氧化钠,使脂质的溶解度增大,以消除或减低脂质所致反应液混浊。优选调
研究目的:外泌体是由大多数细胞释放的30-150nm的囊泡。近年来巨噬细胞已成为肿瘤微环境的关键调控细胞。巨噬细胞产生的外泌体在免疫细胞与肿瘤细胞的通讯中起着重要作用。骨髓来源巨噬细胞(bone marrow-derived macrophages,BMDMs)越来越多地用于体外研究肿瘤相关巨噬细胞(tumor associated macrophages,TAMs)。但是,对于Balb/c小鼠骨
本文对中、小能力驼峰采用线束打靶调速方案和采用电动减速器作为调速设备进行了工程投资分析,对该技术方案发展前景进行展望,对应用价值予以肯定.
随着互联网的普及与发展,网络团购作为一种新型的网络购物方式已经得到了大众的认可。百度糯米餐饮业务系统是百度糯米团购的核心业务系统。为了满足新时代要求,保持老用户的