基于立体视觉的移动机器人人体检测与跟踪系统研究

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:sleepyxu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体检测与跟踪技术是机器视觉领域的重要问题之一,它广泛应用于智能监控系统、智能交通、人体行为识别等领域。虽然相关研究已有数十年的历史,但这个问题目前仍然是计算机视觉、模式识别,特别是机器人领域的一个研究热点。近年来随着移动机器人人体检测与跟踪技术在服务机器人、反恐机器人等领域的广泛应用和发展,它逐渐成为计算机视觉领域中最为前沿的研究方向之一。  为有效解决人体运动姿态变化时的人体检测问题,提高室内环境移动机器人跟踪的实时性和鲁棒性,本文提出了一种基于立体视觉与EKF滤波算法的移动机器人人体检测与跟踪方法,并开发了可视化的图形用户界面,最终在安装有立体相机的Pioneer3-DX机器人平台上进行了实验验证。主要工作有如下几方面:  (1)基于头肩轮廓线胡矩的人体检测方法  人体目标具有强烈的非刚性特点,很难用一种模型去描述。由于人肩部以上区域形状基本稳定,不容易被遮挡;以及胡矩对区域形状具有尺度、平移、旋转不变性的特点,本论文提出了基于头肩轮廓线胡矩的人体检测方法。首先,考虑到深度图像对光照变化具有较强的鲁棒性,通过立体匹配算法计算场景深度图像;其次,在检测初始阶段,根据立体视觉传感器模型、人机运动关系与人体高度的相对不变性,初始化ROI;在运动过程中,利用与跟踪过程建立的数据关联来预测人体深度ROI,从而缩小搜索范围,提高检测精度和速度;最后,针对机器人控制对实时性要求较高的特点以及人体运动过程中的姿态变化问题,采用头肩轮廓线胡矩进行人体检测,实机实验验证了算法的有效性。  (2)基于扩展卡尔曼滤波的人体三维位置跟踪  针对立体视觉精度较低和环境变化会导致的间歇性的人体检测失败,提出了基于扩展卡尔曼滤波算法的人体三维位置跟踪方法。一方面扩展卡尔曼滤波器根据上一状态的人体三维位置估计值和当前状态的人体三维观测值推算当前状态的后验估计,相对于传感器的测量,后验估计更为精确,改善了检测精度;另一方面对于间歇性检测失败时的观测缺失现象,扩展卡尔曼滤波器利用当前状态对下一时刻的人体三维位置进行预测,将状态预测量作为后验估计,确保跟踪过程的连续性,同时将三维预测位置投影得到预测深度,辅助检测ROI的分割。  (3)基于三维空间位置的智能变速控制  利用人体与机器人的相对位置信息,以TCP/IP通信方式对机器人进行智能变速控制。服务器端将推算的控制信号发送到移动机器人,控制移动机器人跟踪人体;同时机器人在行进过程中将自身的位姿上传到服务器端,经过坐标转换得到人体的二维全局运动轨迹,实现人体定位与轨迹跟踪。  (4)可视化图形用户界面的开发与实现  本研究开发了人体检测与跟踪系统的可视化图形用户界面,操作者可通过该界面远程控制人体检测跟踪过程,监视人体检测跟踪状态,调整参数以及观察人体检测跟踪结果,同时机器人可以将自身的位置信息及其运动信息反馈给操作者,保证远程任务顺利完成。  应用上述的人体检测与跟踪算法,在Pioneer3-DX机器人平台上进行了实验验证,实验结果表明,头肩轮廓线胡矩特征对多姿态人体检测具有良好的适应性,保证了检测的精度和实时效果;扩展卡尔曼滤波有效改善了机器人人体跟踪的精度,增强了跟踪的鲁棒性。
其他文献
无线传感器网络具有十分广泛的应用前景,最近十几年来它已经成为国际科研领域的一个热点研究问题。本文研究了无线传感器网路中的所涉及到的几个重要的优化控制问题,包括无线
本文研究了两种基于人工免疫算法的故障诊断方法,并将其应用在了风力发电机组故障诊断中。具体完成了以下工作:提出了基于可变半径检测器的免疫聚类算法的故障诊断方法(Variable Sized Detectors Based Immune Clustering Arithmetic, VDBICA)。该方法引入统计模拟方法对检测器空间覆盖进行估计,并且将此覆盖估计作为控制参数之一;设置了检测器的最大半径
随着社会老龄化进程的加剧,心脑血管疾病成为近年来全球范围内的高发病症之一。在现代医学中,心电图逐渐成为心脏疾病诊断的重要依据。随着计算机技术、微芯片技术、数字信号
工作记忆是在短时间内维持和操纵任务相关的信息能力的记忆系统,在语言理解、学习、推理、思维等高级认知过程中起关键的作用,它是当前认知学和认知神经科学中热点的课题。人
随着现代影像技术的发展,人们对脑结构、脑功能及其在神经疾病中生理、病理变化的研究发生了根本性的变化。磁共振成像以其无创伤性、无放射性和高度的软组织分辨力等特点逐渐
随着科学技术尤其是柔性制造系统的出现,手眼系统越来越受到人们的重视。手眼系统是工业机器人控制技术、图像处理技术、视觉检测技术、网络通信技术等为一体的高自动化、柔性
量子磁力仪是从20世纪中期发展起来的弱磁场检测设备,它利用微观世界中与磁场相关的现象测量磁场,现已广泛的应用于国防工业,地产资源勘探,医学仪器,空间和地面观测等方面。  
三自由度四旋翼飞行器模型是由加拿大Quanser公司提供的实验装置,因其具有较高的实用价值,近年来,旋翼直升机引起了人们的高度关注,而对该模型进行控制律的研究,可以在实验室
随着国际石化行业市场竞争的日益复杂化,以及原油供应市场的持续波动,科学合理的对炼厂进行生产计划与调度方面的优化可以使炼油企业在日益激烈的市场竞争中获得先机。因此,
曲面层间压力监测是提高国防与工业大型设备的装配速度、保证设备实时准确获得系统运行状态的关键,在人工电子皮肤、国防科技以及汽车制造业等领域具有重大意义。碳纳米管导