面向多方式人机交互的肢体动作识别研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:mj830115
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器人技术的迅速发展,服务机器人逐渐进入家庭生活与服务领域,在融入人类社会的过程中,服务机器人需要具备自然的人机交互能力,现有的人机交互技术距离实际应用仍有较大差距,需要学习人与人之间多方式的交互模式,提高服务机器人的人机交互技术水平,确保实际人机交互过程的自然和高效性。本文针对肢体动作识别在服务机器人的人机交互技术中的优势,从肢体动作中静态手势、上肢动作和步态识别三个主要的交互方式的入手,构建多通道人机交互方法,研究基于肢体动作识别的多方式自然通用人机交互。  文中首先研究针对实际人机交互中静态手势识别的难点,提出一种基于单目视觉静态手势识别方法,通过融合多特征的静态手势表征方法,从颜色、纹理和轮廓信息三个方面对静态手势进行描述,实现对静态手势的快速准确的识别,对复杂背景、部分遮挡及用户独立性,具有较强的鲁棒性,并通过公共数据库测试和现有文献中方法进行对比,验证本文识别方法的有效性。  研究了基于单目图像和深度图像融合的上肢动作识别技术,首先通过对深度和VGA摄像头进行标定,获取深度图像和RGB图像的坐标关系。然后构建人体骨骼模型,获取关节主节点处的空间坐标,建立基于球坐标系的三维直方图分布,通过各个主节点的分布情况实现对不同上肢动作的识别,对比现有的上肢动作识别方法,能够有效的消除用户个体的手势表达在时间和空间上的差异性,并在复杂环境条件下具有良好的测试效果。  提出一种基于激光雷达的步态识别技术,在非接触的条件下从室内较大范围内激光数据中,快速提取用户的步态信息。该方法通过激光数据的预处理,提取数据中的人脚数据段,获取人脚的位置信息,通过建立的用户行走步态模型,从连续数据帧中的人脚位置信息的变化中获得人步态运动中的行走速度、单步长、单步时间和步态速率等步态特征,为人机交互提供重要的交互信息。通过实验验证基于激光雷达的步态识别方法的有效性,并对行走中男女步态的特点进行分析。  最后在智能服务机器人实验硬件平台上构建基于肢体动作识别的多方式人机交互系统,通过建立多方式交互信息的语义理解模型,综合肢体动作,表情等多方式交互信息进行机器人的多方式人机交互实验,让机器人与用户实现多方式人机交互的过程,验证基于肢体动作识别的多方式人机交互性能,并建立多方式人机交互系统的评估机制,对多方式人机交互效果进行实验分析。  本论文针对服务机器人在实际应用中自然人机交互的要求,通过肢体动作识别技术和多方式人机交互系统的研究提升服务机器人的交互性能,有利于机器人实际应用及产业化发展,同时对多方式人机交互实际应用效果进行评估,为多方式人机交互模式研究提供有利参考,对服务机器人具有实用性参考价值。
其他文献
盾构机是地铁盾构法施工中的重要机械设备,由挖掘行进系统、稳定支撑系统及注浆系统三大系统组成,在行进过程中起到支撑、稳定的作用,同时利用其尾部的注浆系统对周围隧道围
通过了解国家政策对装配式建筑的导向,了解装配式建筑在全国各地的发展状况,参观考察近10个装配式建筑、2个装配式预制构件工厂后,针对幕墙在装配式建筑上的应用现状进行分析
胡锦涛同志“七一”重要讲话,是一篇闪耀着马克思主义、辩证唯物主义、历史唯物主义光辉的纲领性文献。在讲话中,胡锦涛同志明确提出“三个代表”重要思想的本质是立党为公
三维机织物是复合材料的一种重要增强材料,随着复合材料在多个领域中迅速发展,三维机织物的研究也成为了热点研究内容。由于第三向纱线的存在,三维机织物层间连接力显著提高,
高速往复走丝电火花线切割机床是具有中国特色的电加工设备,自诞生以来就得到了迅速的发展,逐渐成为了一种高精度和高自动化的加工方法而广泛地应用于模具加工业。  作为高速
脉冲噪声测量和分析对于军事和生产有重要意义,脉冲噪声产生的听力损伤危险不仅与总噪声声压有关,还与它包含的脉冲成份有关。目前的脉冲噪声声级计面临着三大问题。首先,脉冲声
随着建筑行业的快速稳定发展,企业竞争日益加剧,因此建筑企业必须要做好质量管理工作才能够在日益激烈的竞争中立于不败之地.为了做好质量控制工作,需要把握质量检测控制的要
目前,国家大力推动的建筑工业化、产业化发展是以预制装配式建筑为主进行推广,这是一个时代的课题.目前,预制装配式混凝土结构配件已经能够实现大规模大批量的生产,可以明显
本文通过对荣华二采区10
期刊
随着人们生活水平的不断提高,人们越来越重视服装和家纺面料的生态环保功能,有“纤维皇后”之称的蚕丝也越来越得到人们的关注。蚕丝具有质轻而细长,光泽好,穿着舒适,手感滑爽丰满