基于机器视觉的叶片夹取机器人研究

来源 :东北林业大学 | 被引量 : 2次 | 上传用户:battichen
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的不断提高和发展,全球变暖的趋势明显,植物固碳的能力越来越受到人们的关注。只有提高环境对碳吸收和存储能力,才能降低空气中二氧化碳的浓度,进而抑制温室效应的恶化。碳汇测量的方法也一直是人们研究的课题,相较于传统的宏观统计方法,微观测量越来越被人们所认可。目前微观碳汇测量的方法,多依靠于测量员手持光合测量仪对局部叶片进行夹取测量。但是每过一小时,测量员就需要手动更换夹持叶片,非常浪费人力物力,因此人工测量仪器应当被自动化测量仪器所替代。本文面向绿色植物叶片的自动夹取,视觉采用Kinect传感器,执行器采用TurtleBot_Arm机械臂。自动夹取涉及到的问题包括基于深度学习的盆栽植物的定位检测、植物叶片的点云分割和位姿计算、四自由度机械臂的手眼标定和运动规划等在本文中分别进行了研究说明,最终搭建完成了一套完成的叶片智能夹取软硬件系统。研究内容主要包括以下几个方面:(1)为了实现对盆栽植物的识别,本文对深度学习目标检测框架进行对比分析,最终采用Coco数据集和Resnet预训练模型进行Faster-Rcnn模型的迁移训练。在Coco数据集的验证下,识别精度mAP可达到0.37。运算时间在英伟达Gtx1070显卡的CUDA并行加速下可达到0.6s,基本可以满足实时的叶片识别与夹取。(2)为了实现对叶片进行位姿提取,本文利用盆栽植物在图像中的坐标,选取坐标区域内的彩色图像和深度图像可运算生成彩色点云。将彩色点云进行累计采样、颜色分离和欧氏聚类得到各个目标叶片点云,进而通过OBB包围盒算法,估计叶片中心点的位姿以便用于机械臂的夹取。(3)为了得到相机和机械臂的坐标变换关系,本文记录了 10组不同机械臂末端执行器位姿和Aruco_Marker点位姿,通过求解矩阵方程AX=XB中X分量的解,实现了机械臂的自动手眼标定。(4)为了实现机械臂的避碰规划,本文利用ROS-Moveit先进的运动规划、3D感知、动力学、控制导航平台完成了机械臂末端执行器的避碰路径规划和夹具的夹取控制。本文利用研究的盆栽植物识别、叶片位姿提取、手眼标定、机械臂运动规划等内容构建了叶片自动夹取机器人的软硬件系统,并在实际夹取过程中进行了大量的测试和验证。实验基本实现了部分植物无人监管情况下的自动夹取,为碳汇测量自动化提供了一个可靠地思路。
其他文献
茶洞语1996年首次为学界所报道。作为一支新发现的语言,茶洞语近十余年来越来越受到学界的关注,相关研究成果也陆续问世,但同时也有许多课题有待深入研究。文章从音系、词汇
目的:探索在我国建立标准化药历。方法:参考国外药历模型,同时考虑患者、医师、临床药师3方面因素,紧紧围绕药学服务的工作重心来尝试构建我国的标准化药历,并结合一个糖尿病
目的:探讨提高喉接触性肉芽肿疗效的新方法。方法:选取本院2012年3月-2015年10月诊治的13例喉接触性肉芽肿患者,采用全身麻醉气管插管,在支撑喉镜下CO_2激光手术切除肉芽肿后,
<正>原发性硬化性胆管炎(PSC)是一种复杂的胆汁淤积性肝病,主要由慢性胆管炎症反应及继发胆管破坏引起,最终导致胆管纤维化及肝硬化。已有报道北美、挪威及荷兰的PSC年发病率
随着我国经济的不断发展,相关部门开始对水电站发展提高了重视程度,而水库大坝建设属于其中一项重要内容,能够提升相关企业的经济效益。文章对水库大坝安全自动化监测工作中
目的探讨幽门螺杆菌(Helicobacter pylori,H.pylori)感染与2型糖尿病并发症之间的关系,为防治并发症提供依据.方法于我科住院的131例2型糖尿病患者,均行胃黏膜组织切片染色确定
<正>~~
期刊
不同文化背景的人们在进行交流中,相互间的理解或误解除了言语本身的因素外,由于对各自文化的认同也是问题所在。中美文化差异表现在许多方面,本文从对中国和美国公民的125份
以财务管理的有关理论和研究方法为依据,通过对上市公司江西正邦科技股份有限公司(以下简称正邦科技公司)对外公布的近3年的财务报表和年度报告的分析,阐述该公司的经营状况;
揭示了国际通用的最低价中标方法在我国推行的主要障碍,提出了解决信用问题等对招投标活动的影响,分析了推行最低价中标法的主要措施,探索了建立信用约束保障机制的重点。