基于鱼眼图像直线特征的室内环境移动机器人视觉伺服方法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:mddh9666
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面向室内环境的智能移动机器人技术越来越成为研究热点,而又有效的空间环境感知是智能移动机器人研究的重要子课题之一。鱼眼相机作为一种重要的视觉传感器,相比与普通相机能够感知到更多的空间信息,我们可以利用这些视觉信息来实现机器人的运动控制。本文提出了一种基于图像的视觉伺服方法(IBVS),该方法基于单个鱼眼相机实现了非完整移动机器人的走廊跟随和门口通过的自主导航任务。本视觉伺服方法主要由图像处理和控制律设计两部分组成。本课题选用鱼眼图像中的空间直线特征作为视觉伺服系统的视觉特征参考,因此本课题的图像处理部分需要从鱼眼图像中提取到空间中的直线特征。本课题首先分析了鱼眼相机的成像模型,选取了统一全向相机模型对鱼眼相机进行建模,将二维平面上的图像处理问题转化为单位球面上的点云分析问题。课题分析了单位球面上边缘特征点的分布特点,经过随机Hough变换将边缘特征点转化为了正半球面的参数点。之后参数点再经过累加器去噪和K均值聚类后得到最终的提取结果。本课题针对室内环境下的走廊线和门框线的提取进行了具体方案的设计,为视觉伺服系统构建提供了可靠的支撑。本课题还对移动机器人进行了运动学建模,在统一全向相机成像模型的基础上分析了三维空间中两条平行线在不同机器人姿态下的成像性质。在相机模型的归一化平面上,利用空间直线特征二次曲线投影相对于中心点的极线定义一个极线三角形,并将视觉特征通过极线的形式进行表示。当移动机器人姿态达到预定状态时,视觉特征为期望视觉特征值。本课题最后通过相机速度与特征值变化的交互矩阵以及相机坐标系和机器人坐标系的坐标变换推导出了最终的视觉伺服控制律。本课题假定空间直线特征位置已知,进行了控制律的仿真实验。为了进一步验证本课题所以提出算法的有效性,本文还搭建了一个视觉伺服实验平台。实验平台采用Turtle Bot2作为移动机器人底盘,Dalsa相机作为视觉传感器以及机器人操作系统(ROS)作为软件框架,使用C++语言作为算法的实现语言开发了一个实际的视觉伺服系统。视觉伺服系统分别在室内的走廊环境和门口环境进行了实验,进一步对算法进行了验证。
其他文献
感官信息反馈可以实现灵巧假手的闭环控制,提高患者的假肢操作性能及体验感。然而,由于残肢患者缺少残肢端的感受器,对外界信息的感知通路较窄。传统侵入式模态匹配假手感知方法存在个体差异性较大、有手术风险等缺点,而传统跨模态匹配感知方法也存在患者认知负荷高及延迟和脱敏等问题,难以被广泛应用。基于视觉反馈模式,本文提出了一种基于增强现实技术的手部感知反馈方法,旨在建立直观便捷的感知反馈通路,减轻患者的认知负
学位
当前“人工智能”已经开始逐步走向实验室,并开始商品化、规模化的应用。以人工智能、物联网、大数据等高科技技术为基础的智慧油田是目前石油领域的发展方向。石油相关企业和组织都对其格外关注,石油企业充分利用新技术的优势,将其普遍用于油气开采、员工培训、井下作业等方面。在此基础上,认知图谱应运而生。认知图谱是集认知心理学、脑科学等学科于一体的新型认知引擎。它运用认知表征、提取、推理和计算等新理论和新方法,形
学位
准确表征致密砂岩储层的孔隙结构特征,对于提高致密砂岩储层的勘探开发水平、增加致密砂岩油气产量等实际问题具有重要意义。在此基础上,开展了致密砂岩储层的孔隙研究。在致密砂岩CT图像研究中,由于复杂的沉积作用和成岩作用,致密砂岩储层孔隙结构复杂,设计一个性能优异的孔隙分割系统尤为重要。为此,本文通过研究孔隙区域的特性,结合传统机器学习和图像处理方法,对致密砂岩的孔隙区域进行分割,从而科学地协助油田开发人
学位
作为计算机视觉领域的具有挑战性的课题,行人检测是利用相关算法对图像或视频中的行人目标进行定位及识别的技术,是行人重识别、行人步态分析、行人姿态分析等技术的研究基础,在工业界拥有众多的应用场景。在自然场景下进行行人检测较为容易,不同于自然场景,监控场景受到分布式的前端摄像头部署、监控视角、背景杂乱和行人目标身体非刚性的影响,出现行人区域遮挡、行人姿态和尺度多变等复杂现象,极大增加了行人检测的难度,其
学位
砂岩图像中矿物的分割在油气地质学研究中具有重要指导意义,通过对砂岩图像的分割并识别每个颗粒的类别,实现矿物组成成分的分析,而准确地分析矿物组成成分是油气储集层勘探的重要环节。目前砂岩SEM图像的分割主要依靠人工进行,随着砂岩图像样本的增加,消耗了大量的人力和时间,而且每个专业人员的经验不同会导致图像分割结果各不相同。机器学习的引入实现了砂岩SEM图像的自动化分割,避免了人工操作的偶然性,有效地提高
学位
工业机器人以其效率高、稳定可靠、重复精度好等优势得到了广泛应用。现代制造业的发展对机器人的智能性和灵活性提出了更高要求。在焊接、涂胶、切割、3C、光伏和新能源领域,有许多应用的需求是以小批量、多品种、短周期为特点,在机器人使用过程中传统的示教编程难以高效且准确的生成机械臂运动指令,而无示教器编程的演示示教技术应运而生。演示示教不仅可以灵活快速生成机械臂作业轨迹,并且不需操作者逐点示教,从而大大加快
学位
未来大型空间望远镜在轨组装技术的需求日益增加,空间望远镜的主镜接口设计、机械臂组装研究是实现超大口径空间望远镜观测技术的关键。对此,本文详细地设计了空间望远镜主镜接口结构及关键参数,优化了接口锁紧机构的从动件运动规律,针对大型空间望远镜在轨组装关键问题提出了一种新式的基于关节力矩最小化的空间机械臂轨迹规划方法,并针对提出的主镜接口结构和关节力矩优化方法进行了仿真与地面实验研究。首先,对大型空间望远
学位
遥感图像精细化地物要素分类在石油勘探开发、土地制图、城市建设和规划、农业发展、地物要素占比统计等应用中发挥着关键作用。目前高分辨率遥感图像地物分类任务尚存在如下问题:小地块分割缺失,地块边缘分割模糊以及细条状的道路、河流分割间断、不完整。本文针对上述不足进行研究,主要工作和创新点如下:1.针对为改善小目标与目标边缘分割提出的多尺度共享网络语义分割方法存在训练复杂度高,以及尺度注意力图在小目标与目标
学位
传统的危险物处置机器人主要以任务型单臂机器人为主,缺少灵巧操作能力,而仿人型双臂机器人相比于单臂机器人可以执行更为复杂的任务,具有更广泛的应用前景。本文在对比分析国内外典型危险物处置机器人的构型、控制方式、任务能力等基础上,聚焦于面向危险物处置的仿人机器人遥操作技术研究。本文针对隐蔽爆炸物处置的双臂松协调型任务和大体积化学品处置的双臂紧协调型任务,搭建机器人遥操作系统,分别对上述两类任务展开研究,
学位
在海上石油开采与运输中,最不可替代的重要交通工具就是油轮或护卫舰等舰船。因此,在广袤的海洋中从SAR遥感图像中检测舰船,从而对其进行监管,无论是在海上石油运输,还是港口石油监管中都有极其重要的意义。由于基于深度学习的SAR舰船检测器具有较强的学习和泛化能力,目前已取代基于手工特征提取的检测器。但是,在近岸复杂情况下,由于建筑、暗礁,岛屿等容易与小型舰船混淆,导致误检或漏检率较高;在星载或机载等条件
学位