基于深度学习的物体检测和抓取技术研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:liuyunvc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器人抓取技术对于服务机器人以及工业机器人有着重大的意义。机器人智能化的发展迫使机器人需要有自主学习的能力,其中也包括抓取能力。机器人抓取的研究内容主要包括分析人手结构和功能,制作多指的手爪,从形封闭和力封闭对机器人抓取进行定性分析以及研究机器人抓取的封闭性、可操作性、稳定性等。近些年,随着计算机计算能力的增强,大数据以及机器学习得到了快速的发展,被运用到了各个领域。机器学习中的深度学习技术也给机器人抓取领域注入了新的活力。本文以Robotiq140二指爪为执行机构,利用深度学习技术建立目标检测模型和抓取网络模型,完成了机器人的抓取任务。主要研究内容包括:虚拟环境的数据对训练目标检测网络的影响,机器人抓取参数的设计,抓取网络模型的搭建,以及抓取网络模型的训练。本文首先针对家用物品进行目标检测,建立了目标检测的网络模型,并且建立了相应的数据集。为了减轻收集数据的工作量,本文提出了背景分离的方法自动从虚拟环境中收集带有标签的数据集,比较了该数据集以及真实环境采集的数据集在不同比例下训练的网络模型的性能。当以3000张虚拟图片和40张真实图片作为训练集,测得平均准确率为94%,而以320张作为训练集,测得准确率为93%。实验表明虚拟数据有助于网络的收敛。接着,基于目前国内外学者提出的基于深度学习的机器人抓取数学模型,设计了本文抓取模型的数学表达式。本文使用全卷积预测以及残差单元设计了抓取网络模型;为了快速获得训练数据,提出了基于视觉的定步长包围盒抓取算法,并在虚拟环境和现实环境中使用该方法收集训练数据。文中使用收集的虚拟数据和现实数据相结合的方法训练抓取网络模型,在虚拟环境和现实环境下验证了抓取网络的性能。在现实环境中,对熟悉的物体的抓取准确率为89%,在新颖的物体(未在训练集中的物体)中抓取准确率为82%。实验表明,定步长包围盒算法明显加速了实验数据的收集,虚拟数据的使用增强了抓取网络模型的性能。最后,搭建了基于V-REP的虚拟仿真实验环境,结合tensorflow完成了虚拟环境下机器人的抓取。然后将训练好的目标检测网络模型和抓取网络模型结合,利用真实机器人对已知物体进行了抓取实验,抓取成功率为80%。实验表明抓取算法是可行的,并且整个系统是稳定的。
其他文献
由于铁路货车的运行对车辆的安全运行是有害的,必须及时处理,否则会降低铁路货车的性能,发生安全事故.分析了货车、车辆运行中常见的故障及原因,结合货车、车辆检查中常见故
微型化、集成化时代对电子设备结构设计的要求越来越高。而多功能结构为卖现微小型化起到了至关重要的作用.   本文在分析和探讨中,设计了适合于某型号电子设备使用的多功
随着积极响应国家节能环保的号召,水泥基发泡保温材料越来越受到市场的青睐。传统的水泥基发泡保温材料大多掺加聚丙烯纤维、玻璃纤维等进行增强或增韧,但存在与水泥基体相容性
促进学生发展核心素养是落实立德树人根本任务的一项重要举措,也是适应世界教育改革发展趋势、提升我国教育国际竞争力的迫切需要.不久前,笔者有幸听了靠谱cop团队王陆教授的
期刊
弧形多股螺旋弹簧简称弧形多股簧,与直多股簧和单股弧形弹簧相比,具有许多独特的性能,如强度高、吸振减振能力强、抗冲击能力强,寿命和安全性高等优点,所以具有很大的应用价值和美好的应用前景。不同参数的弧形多股簧的性能具有很大的差别,但从现有文献看,国内外还没有相关方面的研究报道,所以本文建立了弧形多股簧的空间曲线数学模型,并对弧形多股簧进行了数值模拟研究。为研究弧形多股簧的特性、找出其钢丝之间的摩擦规律
防水路基面承担着重要的防水作用,对于整个路基乃至道路桥梁起到了关键的保护作用,因此在施工时,一定要强化对防水路基面的建设,提升其质量,本文就对道路桥梁施工防水路基面
在我国高等级公路修建中沥青路面占90%以上,但路面通车后,1-2年内甚至更短的时间就容易产生裂缝,主要类型有横向,纵向,网状及不规则裂缝等.路面裂缝的产生对公路的安全行车有
近年来,我国加快了电网建设发展步伐,电力系统规模将进一步扩大、越来越庞大复杂,这对加强电力系统运行的可靠性,提高电力系统运行效率提出了更高的要求。容性设备介质损耗因
随着经济的发展和人们生活水平的提升,建筑行业得到了快速发展.传统的钢筋土建筑已经逐步退出了历史舞台,取而代之的是结构轻盈、抗震能力强的钢结构建筑.但是在建筑过程中,
复杂隔振系统的振动传递特性研究是振动噪声控制领域具有实际工程意义的研究方向,是振动工程界当前的热点研究问题。本文以国家自然科学基金项目为背景,在分析了机械振动噪声控