【摘 要】
:
移动机械臂兼具操作与移动能力,目前已被广泛应用于排爆、搜救等领域,也是服务机器人的主要形态之一。服务机器人的工作环境通常属于充满不确定性的半结构化和非结构化环境,它需要通过视觉等传感器感知外部环境,实时应对突发事件,并对各种特征迥异的目标进行操作。复杂环境下的移动机械臂视觉伺服技术是目前研究的难点与热点,属于移动机械臂的重要共性技术。本文将对服务机器人的视觉感知与手眼协同技术进行研究,具体研究内容
论文部分内容阅读
移动机械臂兼具操作与移动能力,目前已被广泛应用于排爆、搜救等领域,也是服务机器人的主要形态之一。服务机器人的工作环境通常属于充满不确定性的半结构化和非结构化环境,它需要通过视觉等传感器感知外部环境,实时应对突发事件,并对各种特征迥异的目标进行操作。复杂环境下的移动机械臂视觉伺服技术是目前研究的难点与热点,属于移动机械臂的重要共性技术。本文将对服务机器人的视觉感知与手眼协同技术进行研究,具体研究内容如下:(1)针对非结构化环境中目标被遮挡难以识别与定位问题,提出了基于双目视觉的遮挡目标识别与期望抓取点定位方法。首先使用改进特征检测算法对遮挡目标进行识别,确定目标所在区域;然后对不同类别物体的期望抓取位置进行采集,构建常用物体期望位置模型库,在定位阶段,从期望位置模型库进行搜索,与待检测目标匹配,确定目标的期望抓取点,在此基础上利用双目定位算法获取目标期望抓取点的三维坐标信息。实验表明本文所提方法具有较好的应用价值。(2)服务机器人行进时,其视觉传感器的视野会发生连续的动态变化,这种变化会引起背景变化、图像畸变等问题。针对该问题,本文构建了一种基于核相关滤波的动态视角目标跟踪方法。该算法使用目标重识别策略对跟踪框尺度进行更新,克服了经典核相关滤波算法在跟踪目标时,框尺度无法改变的问题。实验结果表明所用方法能够显著提高目标的跟踪精度。(3)针对若干服务机器人的应用场景,进行移动机械臂手眼协同目标抓取的实验研究。将目标识别、定位与跟踪技术融入移动机械臂平台实现该平台的视觉伺服控制。基于“Eye-in-Hand”手眼系统,采用点云位姿估计策略获取目标期望抓取位姿。集成了搭载深度视觉与柔性手爪的移动机械臂系统,对其“Eye-inHand”系统进行标定,实现了若干典型场景下的机器人助老助残任务。
其他文献
我国领海辽阔,海洋资源丰富。舰船作为海洋活动的主体,实现舰船目标的准确识别对于海洋强国建设至关重要。目前,舰船目标数据的采集方式多样,主要有星载、机载、无人机载、舰载、船载和岸基等,不同采集方式所获得的图像数据之间存在一定差异;利用某一平台图像数据得到的舰船目标深度识别网络无法直接应用到其他平台,这是由于平台之间存在观测视角和图片分辨率等多种差异。因此,本文重点开展了基于深度迁移学习的舰船目标识别
滤波器设计方法与技术一直是学术领域研究的热门课题之一,近些年来已得到了长足的发展。目前,虽然以线性卡尔曼滤波器设计为基础的理论和方法已形成一个较完整的体系结构,但现有面对非线性系统所设计出的卡尔曼滤波器,常随非线性程度的增强,而性能在逐步退化;以函数近似为主的扩展卡尔曼滤波和强跟踪滤波,无法在根本上解决由于舍掉泰勒展开式的高阶项带来的线性化误差;以采样近似为主的无迹卡尔曼滤波不关注具体的函数形式,
近年来,随着计算机算力的不断增长,计算机视觉领域依托深度学习的方法取得了显著的进展,车道线检测领域也乘着这阵东风飞速发展。虽然现有的基于深度学习的车道线检测算法在鲁棒性等方面远超传统算法,并在某些简单场景中的检测性已经能够很好的满足实际应用的需求,但是在光照分布不均、车流量大、车道线磨损、夜晚、地标箭头干扰等复杂道路场景中,算法性能不容乐观。因此本文尝试在现有的两种基于CNN的车道线检测算法上进行
对称α稳定(Symmetricα-Stable,SαS)测量噪声下鲁棒纯方位目标定位是被动目标定位领域的一个重要课题,被广泛应用于电子侦察、阵列网络、无线定位和机器人导航等领域。不同于高斯测量噪声,SαS测量噪声没有统一闭式概率密度函数且不存在二阶及以上统计量,鲁棒纯方位定位的优化准则变为最小散度准则,即最小Lp范数准则。典型的迭代重加权伪线性最小二乘(Iteratively Reweighted
近年来,风电场规模越来越大,如果对大型风电场的每台机组进行详细建模,会增加运算规模、耗费大量时间。因此,有必要对风电场等值建模方法进行深入研究。而随着风电场及电网复杂化,故障情况常常会导致无功功率不足,致使系统电压及功率因数降低。静止无功发生器(SVG)被越来越多地应用到电网及风电场中以补偿无功和稳定电压,但实际情况中SVG往往无法提供准确参数,仿真时大多使用典型参数,因此,亟需对SVG的控制器参
大规模多输入多输出(Multiple-Input Multiple-Output,MIMO)技术可以有效地提高无线通信系统性能,而信道状态信息(Channel Status Information,CSI)的特征对系统性能有至关重要的影响。利用导频信号进行信道估计获得信道状态信息是常用的信道估计方法之一,即在发送端将一定数量的导频序列加入到发射信号中一起发送,接收机通过适当的处理技术分别获得导频点
虚拟现实(virtual reality,VR)技术凭借沉浸式视觉体验的优势,越来越多地应用于脑卒中运动障碍的康复治疗。动作视觉感知下镜像神经元系统与感觉运动皮层的功能整合是动作观察应用于脑卒中运动障碍神经康复的理论基础之一。相比于传统的动作观察,VR技术的优势在于其沉浸式的视觉体验,但这种视觉上的体验变化是否能进一步促进镜像神经元和感觉运动皮层的功能整合?VR场景下对本体动作的视觉感知体验,预期
新一轮互联网技术变革的兴起和成熟,倒逼传统行业在发展道路上转型升级,在此背景下,我国现代物流业也逐渐步入与互联网产业深度融合的时代。物流业在过去十多年经历了高速发展的过程,但根据近年数据来看,目前我国物流业内增速逐渐放缓,物流成本由快速下降期进入平台期。作为我国经济实力较强、发展潜力较高的江浙沪地区,物流业的发展不容小觑。物流业的发展态势和江浙沪地区各城市经济的发展相辅相成,物流产业的规模和体量在
近年来,为了推动行为检测识别的应用研究发展,许多专家学者投入人体姿态识别技术的研究。传统的体态检测方法包括特征融合、代数计算、模糊模式算法、OS-KELM算法等,这些方法难以应对人体识别中出现的角度变化以及尺度变化等情形。再后来提出了一些经典的深度学习模型,比如Simple Baseline、CPN(Cascaded Pyramid Network)、SHN(Stacked Hourglass N
近年来,我国政府相继颁布了一系列政策扶持服务机器人行业发展,随着人工智能、云计算技术、5G网络等科学技术不断发展,促进服务机器人朝着运动操控更加精确、感知更加敏锐、人机交互更加智能化的方向持续发展,服务机器人的使用场合与用途也发生了翻天覆地的变化。2020年开始,由于疫情影响,面对面服务大幅减少,并推行无接触式服务,给服务机器人发展带来新的机遇。本文从服务机器人在食堂中的应用出发,设计打菜机器人取