基于视觉感知的机械臂实时动态轨迹重规划

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:shayneinfo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器人在航空制造领域的应用越来越广泛,复杂装配任务往往需要人与机器人在同一空间中协作完成,因此对机器人系统的安全性能与协作体验提出了较高的要求。为了保障工业协作场景下人与机器人的协作安全性,使机器人可以与人类在同一工作空间内共同作业,本文提出并开发了一种基于视觉感知的动态轨迹重规划系统,对多Kinect相机系统的分层感知方法、协作场景中的操作员及障碍物的检测与简化表示方法、碰撞检测与干涉预测方法以及基于约束的轨迹规划等关键技术开展研究,并最终完成了基于视觉感知的在线轨迹重规划系统的实验研究。研究内容具体如下:首先,针对感知视野与模态局限的问题,开展了对多Kinect相机系统进行同步、标定和修正技术的研究,构建了可提供多视角异构模态数据的感知平台;并基于点云数据开展了机器人工作区域内的障碍物分割、聚类、包围盒表示的研究,实现了高实时性、高分割成功率的障碍物感知。为解决传统动态三维人体检测与表示方法误差大效率低的问题,开展了结合深度学习的三维人体检测方法的研究;基于感知平台多视角的异构数据,实现了结合深度学习算法的三维人体检测与骨架生成;并提出了人体骨架融合算法对多视角人体数据进行融合,以解决遮挡情况下检测误差大的问题;最后,开展了人体包围球简化表示方法的研究,对人体三维表示进行重构,从而输出高实时性、高准确度、高完备性的三维人体检测与包围球碰撞表示结果。对传统轨迹重规划算法研究中安全策略不足的问题,开展了结合分级安全策略的动态轨迹重规划研究。首先构建了障碍物与机器人的碰撞检测与干涉预测模块,生成实时检测与预测结果,并基于结果开展了分级安全策略的研究,同时,为了进一步提高规划效率,开展了结合约束的轨迹规划研究。动态重规划方法可对规划场景中的人与障碍物做出动态安全响应,且响应策略符合人机协作逻辑。最后,搭建了基于视觉感知的安全避障系统软硬件平台,基于平台开展了障碍物分割与包围盒表示实验研究、三维人体检测与碰撞表示实验研究和结合分级安全策略的轨迹重规划实验研究,并对人机协作用户体验进行了分析。
其他文献
目前传统工业机器人在一定程度上缺乏灵活性、柔顺程度且适应性较弱,在人与机器人的交互技术逐步趋于成熟的过程,未来人们会向便携式、智能化以及交互程度高的特性发展新一代的协作机器人,通过人机交互的方式,使得机器人在工作内容复杂多变、作业环境不尽相同的情况下,高效、稳定的完成任务,是需要解决的难点。本研究考虑利用表面肌电信号(sEMG)对机器人进行变刚度交互控制,使得操作者在遥操作过程中,可以实时感受到机
学位
随着科技的迅速发展,公众对信息资讯的需求量逐日增加;社会发展节奏的不断加快,也使得快速获取信息资讯成为公众普遍关注的焦点。互联网的出现让科普载体、受众等各个方面都发生了天翻地覆的变化,科普需求已经从"你能给什么"转变为"我想要什么"。"互联网+科普"是对传统科普传播方式根本性的变革,是一种全新的科普理念和科普精神,它颠覆了传统科普自上而下的单向信息传播形式,以多媒体的传播和社交互动为平台,开启了全
会议
轴孔装配是生产制造过程中的常见操作,具有自学能力的深度强化学习在解决小批量、多批次、非结构化轴孔装配任务时有巨大优势;但实际应用时,算法存在着迭代次数多、不合理探索占比大、收敛缓慢、零部件损坏多等问题。针对上述问题,本文基于示教学习,通过模仿人类的轴孔装配动作,提出了一种基于知识引导的深度强化学习轴孔柔顺装配策略,以减少机器人的不合理探索动作、提高深度强化学习算法的学习效率。在此基础上,本文通过融
学位
随着科技的不断进步,越来越多的智能化技术在机器人这个平台上得到了实践和应用,比如室内轮式机器人可以为人们提供向导、物品递送等服务,轮式机器人拥有这些服务能力的前提是拥有对室内环境的感知能力,本文重点研究的即时定位与地图构建技术(Simultaneous Localization and Mapping,SLAM)就可以辅助轮式机器人拥有对室内环境的感知能力。激光雷达作为观测传感器可以辅助轮式机器人
学位
红色资源是党领导人民在长期艰苦奋斗中留下的革命精神及历史遗存与印记。地方红色资源是党领导地方人民在革命战争年代、和平建设年代及改革开放以来的实践中形成的具有地域性、特色性的革命精神及具有思政育人功能的历史遗存与载体。将地方红色资源与课堂教学深度融合,有助于提升思政课教学吸引力与感染力;将地方红色资源与实践教学深度融合,有助于增强思政课教学针对性与实效性;将地方红色资源与互联网深度融合,打造“网络思
期刊
随着我国乃至全世界较大油气田的勘探开发工作均已处于中晚期,现阶段的勘探开发目标正由传统油气资源向非常规资源转变。而受到当今社会紧张的国际关系及全球新冠病毒的肆意传播对全球油气供需的影响,原油价格正处于过去一段时期以来的最高值。在这种全球环境下,进一步加大国内能源生产能力和能源生产质量是确保国民经济持久长期稳定发展和国防实力稳步提升的必然。精细储层描述对于提高油气开采质量起着非常重要的作用,其中通过
学位
移动机器人作为工业智能化的核心技术,可以替代工作人员在不同的作业现场完成任务。移动机器人能够准确、高效地完成任务的前提在于能够准确感知周围环境和获得自身位置信息。由于生产作业的情况限制,部分化工、石料加工车间在生产过程中会产生大量粉尘悬浮在空气中,同时也具有一定的磁场和噪音干扰,在该类情况下,基于磁带、激光板等定位方式会面临难以布置和维护的问题,基于即时定位与建图(SLAM)的方案不会对生产环境进
学位
本文以管道压力波信号为研究对象,针对长输油气管道运行时噪声影响过大、泄漏特征提取困难、工况识别精度低等问题,利用实验室管道采集不同工况压力信号,提出一种添加自适应白噪声的完备集合经验模态分解与改进小波阈值去噪算法相结合的去噪预处理方法。对降噪信号,提取精细复合多尺度散布熵作为特征向量,利用特征序列训练长短时神经网络模型,对管道不同工况进行识别分类。首先深入研究经验模态分解算法以及在此基础上改进的C
学位
安全的油气管道是实现石油天然气顺利运输的基础,油气管道物联网(Oil and gas internet of things,OGIOT)是保障油气管道安全的有效手段。OGIOT中设备能量有限,将严重影响油气管道的安全保障。因此,均衡OGIOT能耗并延长网络寿命是物联网(Internet of Things,Io T)节能的研究热点。本文对OGIOT能耗均衡问题进行优化,主要内容和创新之处如下:(1
学位
浅覆盖岩溶区深基础施工经常发生地面塌陷,对人身安全和工程质量构成重大隐患。本文结合红层岩溶场地某高层建筑(35层)地基基础优化设计,通过地质雷达扫描揭示"蜂窝"状非均质各向异性岩体结构特征;采用岩溶注浆对巨型溶洞管道进行填充加固,构筑"人工坝"阻断地下水运移通道。基于溶洞顶板抗冲切稳定性分析结果,提出采用低承载力与高置换率相结合的素混凝土刚性桩复合地基;对极薄溶洞顶板区,利用钢管桩进行托换加固,有
期刊