复杂环境下机器人抓取目标位姿估计研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:qq664374004
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在复杂的视觉识别环境中,对目标物体进行抓取操作是机器人领域中一个基本挑战。特别是在生活化场景下机器人抓取物体时,机器人对任意姿态放置的物体难以快速准确地识别目标并成功地抓取。因此,迫切需要提高机器人视觉目标识别和目标位姿估计能力,从而可使机器人准确地操作目标物体。传统的目标识别和位姿估计算法都依赖于人为设计特征算子提取相关特征信息,而且在复杂环境下难以针对所有情景设计出精确的特征算子。同时,基于模板匹配的传统位姿估计算法仅二维图像无法估计出物体位姿。因此,针对复杂场景下的目标识别和基于二维图像的位姿估计的研究对提高机器人的自主能力十分重要。与传统方法不同,以深度卷积神经网络为代表的数据驱动方法,通过自主学习相关特征映射,对目标任务的相关特征具有强大的表征能力。同时,卷积神经网络的同变性提高了其在复杂环境下识别目标的准确性。因此,本文基于深度卷积神经网络对目标物体的识别及位姿估计问题展开了一系列的研究:1、基于空洞卷积神经网络的目标分割研究。针对复杂场景中小目标物体的识别问题,本文利用空洞卷积在特征图中保留较为丰富的空间结构信息,建立了基于空洞卷积神经网络的目标分割网络模型。基于labelme标记工具制作了目标分割图像数据集,用于目标分割网络模型的训练,在训练中通过微调方式使模型的损失函数快速收敛,在验证集上目标分割网络的像素精度最终达到99.38%。2、基于深度残差网络的目标姿态估计研究。针对图像中目标物体的位姿估计问题,本文利用深度残差网络提取图像中目标物体更高级的抽象特征,建立了基于深度残差网络的目标姿态估计模型。利用Blender三维渲染软件对物体的模型进行随机姿态渲染,快速生成大量合成位姿数据集。基于ResNet-18的目标位姿估计网络在验证集的位置误差最终达到1.21cm,方向误差最终为18.54°。3、端到端实时目标位姿估计系统应用。针对真实RGB图像中目标物体位姿估计问题,本文通过结合目标分割网络和目标位姿估计网络,建立了完整的端到端位姿估计系统。同时,基于ROS操作系统实现了在复杂环境中对目标物体进行实时地识别及其位姿估计,并设计基于机器人平台的位姿验证实验,端到端实时目标位姿估计系统在实际环境中的最小位置误差为1.85cm,最小方向误差为3.04°。
其他文献
设立国家级贫困县是中国减贫的一项重要政策,由来已久。根据历年经济统计数据,不难发现以国家级贫困县为瞄准对象的扶贫开发政策取得了显著的成效。本文围绕贫困类型、贫困标
云南省泸水县大兴地镇维拉坝泥石流位于怒江一级支流王拉洛河流域。由于所处地理位置及地质条件较为特殊,其活动性较强,威胁着下游千余人生命财产安全,其发生成灾可能造成的损失极大。论文在该泥石流进行调查研究的基础上,分析了其形成机理,并提出了相应的防治措施,其成果为泥石流灾害治理提供了科学依据。论文取得如下研究成果及认识:(1)维拉坝泥石流为沟谷暴雨泥石流型稀性低频泥石流,等级为大型,治理工程等级为二级。
自1999年实施退耕还林工程以来,黄土高原地区营造了大面积人工林,其在防治水土流失方面取得了极其显著的效果。但随着林木生长和林地面积的增加,林地需水量也不断增加,人工林开始出现“土壤水分失衡”和“土壤干化”等问题,林木生长衰退,河川径流减少等一系列生态问题日渐显现。因此林地、降雨和土壤水三者之间的相互关系成为科学研究的热点,更是植被恢复实践中亟待解决的关键问题。为此,本研究以晋西黄土区人工侧柏林地
期货投资基金是一种投资于期货市场的投资工具,其运作机制与证券投资基金类似,能为投资者提供更多的投资选择。但我国市场上存在着大量私募期货投资基金,用于中小投资者投资的公募期货投资基金却只有一支——国投瑞银白银期货。对该支基金进行业绩评价有利于分析期货投资基金入市面对的初始状态,为后入市的期货投资基金提供借鉴经验。本文选取了混合、股票、股票指数三种类型各两支(一支发行较早,一支与国投瑞银白银期货同期)
本文讨论了感应钎焊工艺方法的特点,分析了感应钎焊的温度场调节问题;应用感应加热的理论基础,研究了控制钎焊区温度的技术方法:提出了根据零件的结构特点选择电源、设计感应
随着智能制造业的发展,视觉引导机器人被广泛应用于各种制造业场景。物体姿态估计是机器人视觉系统感知周围环境的关键技术,可以帮助机器人获取物体的空间位置和朝向,以便执
目前机器人与自动化技术不断发展,在工业领域获得了广泛的应用,提高了生产速度和效率,同时也解放了繁重的人工劳动。在自动化生产领域,上下料是其中一个重要的环节,仍然有部
现如今,复值神经网络(CVNN)以其能处理复值数据以及在分类方面表现出比实值更强的计算能力的优越性和实用性引起越来越多国内外学者的研究,例如复值BP神经网络、复值径向基神
所谓城镇土地集约利用是指在既定的城镇范围内,实行内涵式用地方式,对城镇土地追加投资投资,集中高效实用,而不是靠外延或扩大城镇范围,分散使用土地。土地利用集约程度的高
会议
目的:评估平肝宁肺方治疗慢性咳嗽(肝火犯肺证)的临床疗效及安全性。方法:收集在成都中西医结合医院门诊就诊的慢性咳嗽(肝火犯肺证)患者80例,经知情同意并签署文件后随机分为试验组及对照组,每组40例。试验组给予平肝宁肺方治疗,对照组给予阿斯美(复方甲氧那明胶囊)治疗,两组治疗时间均为4周。观察治疗前后VAS评分、咳嗽症状分级、LCQ评分、中医证候、安全指标(血常规、大便常规、小便常规、肝肾功、心电图