基于Kinect手势识别与机器人编队的人机交互系统的研究

来源 :东北大学 | 被引量 : 1次 | 上传用户:wlh0089
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人机交互技术的不断发展,人与机器人之间的交流也变得更加普遍。为了取代复杂繁琐的操作程序,一种更直观的的人机交互方式成为了人们的迫切需要。因此基于视觉识别的人机交互手段得到了人们的广泛关注。以人类为识别对象的视觉识别可以分为人脸识别和手势识别。对于机器人控制而言,手势控制相比于表情控制更具有实际意义。因此,本文研究的是基于手势识别的机器人编队控制系统。研究内容分为两个方面,一方面基于手势识别技术建立人机交互平台,另一方面提出了群机器人编队的控制方法。对于手势识别部分,本文选取了当前最为流行的Kinect摄像头作为图像采集设备。与普通摄像头相比,Kinect摄像头能够为用户提供深度数据和骨骼信息。并且微软还提供了专门的SDK开发工具包。针对Kinect摄像头的特点,本文提出了一种基于深度信息的手势识别方法。静态手势的识别可以分为四个步骤,依次是获得人体骨骼模型,静态手势分割,手势轮廓提取和指尖检测。首先获得人体骨骼模型,然后对手势分割的流程进行了详细介绍,提出了基于肤色检测并结合图像深度信息的手势分割方法。其次详细描述了 Moore-Neighbor算法提取轮廓的过程。接着提出了将凸包检测、层次聚类、K曲率算法相结合的指尖检测算法。最后通过实验验证了识别算法的准确性。对于多机器人编队部分,本文选取了应用较为广泛的TurtleBot机器人作为研究对象。首先分析了多机器人系统的特点,然后分析了机器人编队中可能遇到的问题,然后对机器人的定位问题做了分析,并提出了一种基于USB摄像头的视觉定位方法,定位准确可靠。最后对机器人的编队方法进行了分析,并设计了机器人的行为方式以及避障方法。在文章的最后部分,搭建了基于手势识别和机器人编队的人机交互系统。用户可以通过切换不同的手势来控制群机器人的运动状态和队形。通过多次实验证明了本文所设计的人机交互系统的准确性和实用性。本文提出的人机交互系统具有较强的实用性,能够较好地解决人机交互过程中出现的问题。文中提出的手势识别方法准确有效,具有很好的应用前景。在机器人编队中加入手势干预,能更好的提高机器人的工作效率。本文提出的人机交互系统在服务机器人领域具有很好应用价值。
其他文献
药品是指用于预防、治疗、诊断人的疾病,有目的地调节人体生理机能并规定有适应证或功能主治、用法和用量的物质。由于各方面的原因,药品经常出现短缺现象,为推行现行医药价
认为血瘀是重要致虚原因,同时也是正虚的临床表现之一,活血化瘀既可阻断因瘀致虚环节,又可消减正虚的临床表现,对扶正补虚具有增效作用.并以扶正补虚古方和当代扶正补虚法配
表决权排除制度是指原本具有表决权的股东、董事(监事),因为待决事项与其具有特别利害关系而被排除表决权,且该类股东、董事(监事)的表决权不应计入出席股东大会、董事会(监
由于手部在人类劳动、行为中的支配性地位,手势,特别是其运动轨迹,因富含肢体语言信息而成为了新一代人机交互方案的理想载体,在智能家居、无人驾驶、增强现实等领域均有着广阔的应用前景。但是,现有的手势轨迹识别算法一般没有集成有效的运动轨迹获取方法,并且缺乏对多变应用场景的鲁棒性,无法满足实际应用需求。因此,本文将手势轨迹识别整体流程拆分为三个子任务,即手势检测、手势跟踪和轨迹识别,并根据手势的具体特点,
<正>【据《He patology》2012年6月报道】题:比较两组非同期丙型肝炎移植人群:提高抗病毒治疗效力的策略(作者Berenguer M等)在以往的研究中发现,严重的纤维化与丙型肝炎移植
目的:为大三叶升麻的化学成分研究及其开发利用提供参考。方法:以"大三叶升麻""化学成分""Cimicifuga heracleifolia"等为关键词,组合检索1993年1月-2014年5月在Pub Med、中国知网、
<正>目的总结分析2009年1月至2012年6月我科收治的12例糖尿病合并细菌性肝脓肿的临床特点及诊疗经过,并探讨最佳临床策略。方法对12例糖尿病合并细菌性肝脓肿患者的临床资料
会议
当前,国家发展海洋强国战略已经成为一个时代的强音。我省正在为建设机制活、产业优、百姓富、生态美的新福建而努力,各地积极融入“21世纪海上丝绸之路”建设,并全力推进海峡蓝
报纸
内源性大麻素系统包括内源性大麻素物质、特异性大麻素受体1(cannabinoid receptor 1,CB1)和CB2.内源性大麻素系统在胃肠道疾病、肝脏疾病、胰腺疾病和肿瘤的发生发展过程中扮
为提高单相PWM整流器输出电压的动态性能,分析了单相PWM整流器内部功率传递关系,提 出一种电容能量反馈与带系数修正负载功率前馈控制策略。通过电容能量反馈减小负载扰动过