仿生眼三维感知与运动控制研究

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:yydx_2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
仿生眼是智能机器人系统中必不可少的组成部分。目前,国内外关于仿生眼的研究主要集中于仿生运动和视觉感知机理方面,但如何将目标三维信息与仿生眼的仿生运动控制进行有机结合,还有待进一步探讨。因此,本文针对仿生眼的三维感知和基于三维信息的仿生运动控制展开研究,着重研究仿生眼的三维感知、扫视和平滑追踪运动控制、机器人原位注视点跟踪和趋近注视控制。  首先,设计了一套4自由度的仿生眼系统。该系统通过双目CCD摄像机和视频采集卡获取图像。两台相机分别被安装在左右运动模块上。运动模块通过两个步进电机实现左右旋转和上下俯仰。步进电机的角度通过旋转编码器采集得到。基于该仿生眼系统,提出了一种单双目相结合的三维感知方法。用手眼标定方法得到相机坐标系与运动模块坐标系的变换关系。利用初始位置双目的外参数、双目的手眼参数和步进电机的角度可以得到任意时刻双目的外参数。根据双目外参数、目标在左右图像中的坐标和双目相机内参数,可以计算得到目标的三维坐标。根据不同时刻单目的外参数、目标的图像坐标和相机内参数,利用单目多视图融合的方法得到目标的三维坐标。通过单目运动立体视觉和双目立体视觉的结合可以扩大仿生眼的感知视野。  其次,针对仿生眼系统,提出了一种基于视觉和限位开关结合的廉价高精度初始定位方法。当系统启动时,第一步利用限位开关进行粗定位,第二步基于最小二乘椭圆拟合进行视觉精定位。这种方法价格低廉且定位精度高,平台每次启动不需要重复标定双目初始位置的外参数。提出了一种基于主动目标注视的立体视觉测量方法。通过离线标定得到双目的基线和相机的运动角度偏差。在测量目标的三维坐标时,一个相机固定不动,作为监视相机,一个相机运动,使目标在水平方向上成像在图像的中心。利用运动相机的转动角度、目标在监视相机的成像坐标以及监视相机的内参数得到目标的三维坐标。这种方法在保证三维测量精度的同时,扩大了感知的视野。实验结果验证了该方法的有效性。  再次,给出了仿生眼在运动情况下的深度测量误差模型,分析了减小深度测量误差的方法。并据此给出了基于目标三维坐标的最优观察位姿定义和求取方法。基于最优观察位姿,提出了扫视和平滑追踪的控制方法。在扫视运动中,仿生眼通过立体视觉感知得到目标的三维坐标,根据三维坐标计算仿生眼的最优观察位姿,然后通过运动规划得到步进电机的运行曲线,最后通过运动控制器按照运行曲线控制步进电机到达期望位置。在平滑追踪过程中,测量目标当前时刻的三维坐标,并根据目标的运动速度预测其下一采样时刻的三维坐标,根据预测的目标位置计算最优观察位姿,进而利用步进电机的运动曲线规划,使电机平稳、快速的跟踪目标。实验结果表明,基于三维坐标的扫视和平滑追踪是可行的。  最后,以仿生眼为基础,加入可旋转和俯仰的头部,以移动小车为头眼的载体,设计了移动机器人系统平台。利用该平台,提出了一种基于三维坐标的身-头-眼相结合的注视点跟踪方法。在跟踪过程中,利用双目仿生眼得到目标点的三维坐标并分别转换到头部坐标系和移动机器人坐标系。然后根据目标的三维坐标分别得到头部、眼部和躯干的期望位姿。当进行原位注视跟踪时,以资源消耗最少和系统最稳定为原则计算眼部、头部和躯干的期望位姿。当进行趋近注视时,以机器人正对目标且在目标附近为原则计算眼部、头部和躯干的期望位姿。最后控制机器人运动到期望的位姿。实验结果表明,基于三维坐标的身-头-眼相结合的注视点跟踪是可行的。
其他文献
微光图像通常是在夜间等低照度条件下所获取的一类图像,具有对比度和亮度都很低的特点。智能手机、平板电脑、数字相机和航拍相机等设备的发展与广泛应用加剧了这类图像的产生
随着现代信息化战争的变革,作战力量愈来愈趋向于体系化,而多武器平台的协同作战则是作战体系的主要特征。面向新的战争形态也就有了新的技术需求,需要通过任务规划,综合考虑战场
电力电子设备的大量使用和非线性负载的不断增加致使公用电网的谐波污染日益严重。有源电力滤波器作为一种先进的优化电能质量的手段,可以提高公用电网的供电质量,而指令电流
随着人类基因组计划和多种模式生物基因组测序的完成,对于大量生物序列数据的有效处理以便寻找序列中蕴涵的信息成了目前生物信息学研究领域的热点问题之一。真核生物选择性
学位
作为一类由强化学习、最优控制和人工神经网络交叉融合产生的优化方法,自适应动态规划(Adaptive Dynamic Programming,ADP)通过模仿生物的学习机制与环境进行交互,利用交互数据
自平衡机器人的建模与控制问题是机器人学和控制科学研究的重要课题。柔性机器人能够从结构上模拟生物机体的柔性特性,其中柔性自平衡机器人是一个非线性、强耦合的系统,其建
数字信号处理是利用计算机或专用处理设备,通过数字形式对信号进行采集、变换、滤波、估值、增强、压缩、识别等处理,用来获得符合人们要求的信号形式。而DSP系统则是以数字
近年来,随着虚拟现实技术以及硬件设备的快速发展,越来越多的用户能够接触到虚拟现实技术所带来的高沉浸感的交互式体验,而这种交互式体验又离不开大量的虚拟角色动画。传统的角
随着海洋开发的发展,人类对海洋作业任务的深度及安全性提出了更高的要求。搭载在7000米载人潜水器的深海微型ROV,是载人潜水器伸出去的机械手,大大强化了载人潜水器的作业能
学位
瞬变电磁法是在接地导线或不接地回线中通以脉冲电流(常为矩形波、半正弦波、梯形波)作为激发场源使地下产生一次脉冲磁场,来激励探测目的物感生二次电流,在脉冲间隙通过接收线
学位