基于Kinect的机器人目标识别及抓取技术

来源 :福建工程学院 | 被引量 : 0次 | 上传用户:jrelt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着中国制造2025的推进,工业生产中自动化需求日益增加,视觉技术在学术界和工业界得到了重视和广泛应用。机器人目标识别和抓取功能可大大减轻劳动负担,并给社会带来巨大的生产力。在早期自动化生产线中,机器人抓取的零件种类单一,且零件需要放置在指定位置,否则机器人无法抓取。而在目前多品种大规模生产环境中,多种零件被混合放置,并且摆放位置不固定,这给机器人无序抓取提出了新的挑战。针对实际工业生产中的复杂工况下,不能精准的识别和抓取零件的问题,本文提出了一种运用改进的YOLO-V3目标检测算法的机器人抓取方法,可以实现零件的识别检测、定位以及抓取的目的。首先,使用改进的YOLO-V3目标检测算法来识别检测目标零件。其次,通过手眼标定把零件在图像中的像素坐标转换成机器人基坐标下的坐标。最后,通过求解机器人正逆运动学解来规划机器人运动来完成对目标零件的抓取任务。本文的主要工作如下:1.基于YOLO-V3目标检测算法,在网络结构和多尺度检测上进行改进,并引入空洞卷积的思想。采用残差密集块替换原来的YOLO-V3目标检测算法中的残差部分,再和卷积层融合,增强网络对零件特征信息的提取。由原先的3个尺度检测增加到5个尺度检测以提高对大小不同的零件的识别检测能力。通过空洞卷积扩大零件特征图辅助网络提取深层次的物体特征。使用Kinect V2传感器采集零件的图像并制作成数据集,用数据集训练目标检测模型,取得较好的检测效果,实现了零件的精准定位,训练得到的目标检测模型具有较好的泛化能力。2.采用棋盘格标定法完成Kinect-V2相机标定并获得了相机的参数。建立了机器人手眼标定系统,获得了相机坐标系与机器人基坐标系的关系式,结合Kinect V2相机标定和手眼标定的结果,将目标零件的像素坐标转换到机器人基坐标系下的坐标,为完成零件抓取任务做好充分准备。3.结合改进的YOLO-V3检测模块、标定模块、机器人运动控制模块,从Kinect V2相机获取目标零件的图像,到改进的YOLO-V3目标检测模型识别检测零件的类别并获得像素坐标值和深度值,再由Kinect V2相机标定系统结果获得零件的实际坐标信息,最后驱动机器人完成零件的抓取任务,验证本文所提方法的有效性。
其他文献
本文通过税务部门征收残保金带来的新变化,回顾和总结了温州市征收残保金取得的业绩经验,通过对征收过程中存在的一系列问题的浅析思考,从全局出发,从细处着手,紧紧围绕以征收残保金为手段,促进残疾人就业这个中心任务为工作目的,在逐步健全和规范征收管理机制、完善征收操作程序、依法推进分散按比例安置残疾人就业等方面,建设性地提出了改进的意见,为提高税务部门的残保金征收管理水平、进一步推动残疾人事业发展,落实关
期刊
如今电动汽车规模庞大,永磁材料性能增强,永磁同步电机的应用逐渐趋于白热化,相关研究也层出不穷。随着控制技术的迅速成熟和高性能永磁材料的问世,永磁电机结合驱动控制系统普遍应用在新能源汽车市场,驱动电机电磁振动与噪声分析及优化研究在新能源汽车行业已不容忽视。本文以某型号纯电动汽车的12极48槽永磁同步电机在三相正弦振荡波工作电流驱动下产生的电磁振动与噪声展开探索研究,研究内容主要分为以下几个部分:首先
近年来,节能与新能源汽车成为我国重点的发展领域,汽车消费市场也随之不断的升级改造,消费者对于车辆的要求也是越来越高。汽车传动系统的扭振所带来的振动、噪声等问题,直接影响着车辆的舒适性以及安全性,为了解决该问题从而提高整车的相关性能,对扭振展开了全方面的研究。由于混合动力汽车传动系统中集成了多个动力源,与传统汽车相比,传动系统的扭转振动问题呈现出更加复杂的特点,因此本文以并联式混合动力汽车为研究对象
不同于传统的燃油汽车,电动汽车将动力电池作为其动力源取代了原先的燃料,电机则取代了发动机,电控系统中的电机控制器便具有汽车变速箱的功能,它们综合决定了电动汽车的爬坡、加速、最高行驶速度等动力性能指标。汽车电机控制器在整个开发周期以及量产后都需要对其性能进行测试,而原先的测试技术无法满足其复杂的测试要求,因此,汽车相关组织逐渐制定了一种V模型开发的架构。硬件在环测试(Hardware-in-the-
近年来,移动机器人被广泛用于救灾救援和工业服务等方向,传统的地图构建方法难以满足移动机器人对高层次任务的需求,提升移动机器人地图构建的语义信息使其更智能化势在必行。目前地图构建的方法倾向于处理静态问题,而在动态环境中存在精度低、实时性差的问题。因此,本文针对目前地图构建方法在动态环境下存在的不足,引入光流法和语义分割方法将动态干扰对象从SLAM系统中剔除,保证实时性的同时提高SLAM系统在动态环境
随着科技发展日新月异,新技术革新层出不穷,全球经济结构不断变革发展催生新的工程人才需求。现代工程的范畴愈加广泛,不再局限于原有传统的工程类问题,而是向更具创新性和社会性的价值维度延伸,对工程技术人才的素质需求更加全面。尽管我国高校工程人才培养已取得了长足发展,但高素质应用型工程人才培养是一项复杂的教育管理工程,如何从根源上提升教育质量,仍然是困扰高校工程人才培养发展的难题。为突破目前高等教育工程人
公交车出行是城市居民主要出行手段之一,由于公交网络中车内客流信息不透明,公交车内拥挤的现象时常出现,导致乘客乘车体验降低。针对上述问题,本文基于纯电动公交车运行数据,进行纯电动公交车内拥挤程度估算。主要研究内容如下:(1)纯电动公交车内拥挤程度划分。基于拥挤程度判断的相关研究和标准,对所研究的公交车进行车内拥挤程度划分。由于本文选用的车型较小,根据车内乘客所占用立席面积的大小,拥挤程度共划分为四类
导卫装置对钢铁产品的生产效率与质量影响极大,但现有的导卫材料难以满足高温高摩擦服役环境下的使用需求。本研究通过SPS烧结技术成功制备出TiCN/W-Cu与TaC/W-Cu复合材料,并对其组织结构、致密度、硬度与摩擦磨损特性进行研究,期望满足导卫材料在耐磨性能方面的需求。通过化学镀法制备了包覆效果较好的Cu@W粉末。优化TiCN/W-Cu-Ni复合材料SPS烧结工艺,确定烧结温度为1200℃。TiC
我国是建筑大国,建筑业快速增长伴随着高消耗和高排放。采用绿色建筑技术有效降低建筑能耗和碳排放,是推动建筑业转型升级和可持续发展的重要方面。与普通建筑相比,开发绿色建筑的增量成本、绿色建筑收益的不确定性和长期性等因素制约了绿色建筑技术的采纳应用。如何制定实施有效政策以促进绿色建筑技术采纳,推动绿色建筑发展,已成为研究和实践的热点。探讨环境规制对绿色建筑技术采纳的影响,为实施环境规制政策推动绿色建筑发
近年来,不可再生资源逐渐枯竭,能源需求量不断的增长,如何在节约能源、保护环境的前提下提供不间断的电力服务成为了一个难题。为了解决这个难题,传统电网转变成为了一种现代化电气网络,这种现代化电气网络便是我们所熟知的智能电网,智能电网需要复杂的双向通信基础设施来维持智能组件之间的电力流动。其中,高级量测体系又是智能电网的重要组成部分,它用于用户和电力公司之间的双向通信,高级量测体系又包含了智能电表、数据