基于双目视觉的障碍物检测研究与实现

来源 :西南大学 | 被引量 : 0次 | 上传用户:liu3352
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
实时环境感知是自主移动机器人需要具备的重要能力之一,依靠各种传感器,机器人能从所处环境中获取信息为它服务。用于获取三维场景信息的传感器有激光雷达、结构光相机、TOF相机和双目相机等。相比于其他传感器,双目视觉传感器价格更加低廉,搭配合适算法时可以满足大部分需求。基于这个前提,本文将设计实现一套使用双目视觉传感器进行障碍物检测的系统,要求准确实时检测场景中的障碍物。本文的主要的工作和创新如下:首先,对单目相机成像原理和双目相机测量原理建立相应数学模型,为后续算法提供理论支持。模型中各个参数都需要对应的标定算法计算,因此研究了常用针孔相机的标定算法和立体标定算法原理。对采集到的图像进行立体校正之后,所得到结果可以视为理想双目相机采集。其次,分别研究了三类常用的立体匹配算法的实现原理,因为立体匹配算法主要用于从双目图像中计算视差数据,这是恢复三维信息的关键步骤。在实验过程中,从理论出发,结合已有的成果排除无法实时匹配的全局算法。通过对比半全局算法和局部算法在实际场景中匹配效果后,最终选择前者,并且设计简单的实验验证所选择算法的准确度。最终发现半全局立体匹配算法在一定范围内的匹配效果基本满足需求。再次,本文基于视差数据完成障碍物检测,因为视差图可以用于恢复场景中三维点的分布信息。障碍物检测一般会用到相机外参,利用特定相机安装姿态时地面视差的特征,本文使用RANSAC算法从v视差图中实时动态估计相机外参。为了更加鲁棒的检测障碍,对比多个文献中所提出的方法后,最终选择MultiLayer Stixel算法完成自由空间和障碍物的分割,该方法能有效降低视差数据中的噪声干扰的问题,可以很好的估计出场景中的路面、路面上的障碍物甚至悬浮的物体。针对Multi-Layer Stixel算法检测结果没有关联的问题,本文提出一种对检测结果使用DBSCAN进行聚类的方法,聚类之后在图像上可以完成障碍物分割。最后,本文设计实现了一台简易的移动平台用于测试障碍物检测系统的整体效果,移动平台装配廉价双目相机并使用本文所设计实现的障碍检测系统。为了能让小车自主移动,还为它设计一套简单的导航算法。然后在实验环境中测试平台能否准确实时的计算障碍物位置,同时在实验场景中持续自主移动。实验结果表示,该系统能检测出大多数的障碍物体,并且检测系统处理双目图像的速度满足实时性要求。
其他文献
随着人工智能、互联网技术的应用,网络教育实现飞跃发展。目前,网络教育考试系统中对于选择题、填空题等客观问题可以做到准确的自动评分,但是对于主观题的评分仍然只能由教师进行人工评分。随着网络教育考试的规模不断扩大,教师阅卷负担越来越重,这不利于网络教育教学的发展。因此,研究主观题自动评分的相关技术具有十分重要的意义。文本相似度计算是主观题自动评分中的关键技术,本文对几种适合于主观题自动评分的相似度算法
近年来,信息学奥林匹克竞赛在各大中学不断地发展与推广,评测系统作为信息学竞赛中不可或缺的辅助工具,不仅能减少教师的工作量,还能给学生提供及时且准确的反馈。目前信息学竞赛课程中使用的评测系统有两种,一种是网络上的开放式在线评测系统,也是目前使用最多的一种方式;另一种是本地搭建的校园在线评测系统。其中开放式评测系统虽然使用方便,但是其题库资源有限、不具备可再开发性且不方便管理学生,影响了教师对学生学习
目标检测(Object Detection)是计算机视觉的一项基本任务,在智慧医疗、自动驾驶、智能农业等领域均具备应用价值和潜力,因此从理论和应用层面,对目标检测算法进行深入研究具有重要的现实意义。本文重点研究基于深度学习的目标检测算法。通常,基于深度学习的目标检测算法根据其机理可分为二阶段目标检测算法与一阶段目标检测算法。根据现有研究,一般意义上,二阶段目标检测算法精度高、但实时性差;而一阶段目
随着人类进入信息时代,信息传递、存储和交换的需求日益递增,同时这也使得信息的安全和保密问题日益严峻。科学家们试图从不同的学科和角度研究信息安全的机制和实现手段,由此出现了RSA、El Gamal、椭圆曲线、DES和AES等基于计算复杂性的公钥密码体制的现代密码通信。而这些基于计算复杂性的密码体制都面临着量子计算机的致命威胁。2019年10月,谷歌公司在Nature发表的研究表明,其开发的53比特量
在国家政策的大力支持和引导下,我国新能源汽车产业飞速发展。伴随着新能源汽车保有量的不断增加,由于技术不完善导致的产品质量问题逐渐暴露,事故率明显升高,给人们的安全出行带来了挑战。为了加强新能源汽车应用推广和安全监管,促进技术发展,国家要求企业建立完善针对新能源汽车的远程监控平台,实时监控车辆运行情况。然而面对日益增长的终端数量和数据量,传统车辆监控平台架构设计在性能、时延和可靠性上难以满足现存需求
由于社会的发展与科技的进步,在城市混合交通中,城市的机动化水平得到的长足的发展。各类公共交通运输工具鱼龙混杂,电瓶车在其中所需要占据着的位置相对较弱,且据中国公安部交管局初步统计,电瓶自行车驾乘人员死亡事故中,约80%为颅脑损伤致死。有相关研究表明,正确佩戴安全头盔能够将交通事故死亡风险降低60%至70%。故2020年4月,公安部道路交通管理局又一次做出了重要部署安排,在本年度国内城市控制范围里,
开源软件的诞生促使软件行业踏入了新的发展周期,与此同时,它受到了政府、相关企业、软件从业者的普遍认可,并得到了广泛应用。开源软件在竞争激烈的软件开发模式中占据了一席之地,也因此成为了全球科技创新的重要载体。随着中国进入科技自主创新的时代,推进国内的开源运动以及发展国内的开源软件产业势在必行,而开源软件的可持续性发展与开源软件许可证的选择问题息息相关。开源软件许可证是开源软件代码复用和协作开发的法律
随着人类进入信息化社会,教育信息化已成为推动和深化中学教育改革的一项重要措施。将信息技术和现代教育理念与课程教学有效结合对于提高教学效率、提升教学质量及学生综合素质具有重要意义。《高中信息技术课程标准(2017版)》明确提出中学教育部门应以围绕全面提升学生信息素养为目标,针对自身实际特点有效利用现代信息技术整合课程资源,丰富学生学习方式,鼓励学生在开放、协作的数字环境下进行自主学习和实践,并利用多
近年来,随着我国经济的快速发展以及道路交通的建设,机动车总量和驾驶员数量都有显著的增加。对交通安全管理体系、事故应急处理带来了极大的考验。通过对大量交通事故案例分析,诱发汽车交通事故的主要原因是驾驶员在行车过中存在许多与驾驶无关的行为,比如在驾驶过程中接电话、查看信息等。这些行为分散了驾驶员的注意力,导致驾驶员无法注意周边的交通环境,从而发生交通事故。交通事故的发生给人类社会带来了巨大经济损失和大
系统论认为开放性、自组织性、复杂性、整体性、关联性、等级结构性、动态平衡性、时序性等是所有系统的共同基本特征。在传统的几何学中,人们总是习惯在欧几里得空间对一个几何对象进行研究和度量。与传统的几何学不同,分形理论作为一种新的认识论和方法论,在很多方面都具有启发意义:一是整体与局部形态的相似,启发人们通过认识部分来认识整体;二是揭露了介于整体与部分、有序和无序之间的新形态;三是从一个特定层面揭示了世