基于面部动作肌电信号的人机交互研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:sccd920141
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,通过解码人体生物电信号进而赋予机器理解人类意图的能力,已成为人机交互领域研究的热点方向。而其中肌电信号具有信噪比高、易采集、模式丰富等特点使得基于其的人机交互受到广泛关注,并己在基于手势、口型识别等人机交互中得到应用。本文研究基于面部动作肌电信号的人机交互技术。由于不同面部动作(如皱眉、眨眼、咬牙等)需要相应的肌肉群不同程度参与,从而导致面部动作肌电信号在位置、幅度、频率等方面存在差异。因此,选择合适的面部动作,并利用信号处理和机器学习技术准确检测和识别其产生的肌电模式就可以实现对不同动作的精准编码,从而作为对外交互的指令进行输出,实现不需要双手和语音的人机交互。本文侧重于对具有共性肌电模式的多种面部动作进行准确、实时的识别算法研究。主要工作有:1)基于前额单通道的面部动作肌电模式识别算法研究。通过实验分析选择6种具有跨被试、跨试次共性肌电模式的面部动作。提出短时能量信号分割方法,提取多种时域特征并结合随机森林分类的识别算法。对10名被试的6种面部动作肌电模式进行识别,达到92.05%的平均正确率。该方法在跨被试迁移学习数据增强情况下能进一步提高识别准确率(94.17%);在不需要自身训练数据而完全采用他人数据进行训练的情况下达到了 84.25%的平均识别准确度。2)基于头部多通道的面部动作肌电模式识别算法研究。提出了一种融合通道内时域特征、通道间时域特征及相关性特征的实时特征提取方法并结合随机森林分类算法的面部动作识别算法,对5名被试多达16种面部动作进行了识别,达到96.8%的平均识别正确率。通过对5种眼部动作和6种嘴部动作的指令组合理论上可将交互指令扩展至60种,但需要较大训练成本。本文中,3位用户通过训练测试了 30种指令组合,达到了 83.9%的平均准确率。另外为了去除或减少头部运动干扰导致的误触发和识别错误,引入了陀螺仪传感器跟踪头部运动姿态并反馈到识别算法中,增加了系统的鲁棒性。3)基于单通道和多通道面部动作肌电模式识别技术的实时人机交互测试系统开发。开发了可以应用到不同场景的实时面部动作人机交互测试系统,包括对车辆驾驶时的手机控制、机械臂运动控制、多旋翼无人机飞行控制以及打字系统。测试结果证明了系统的有效性和实用性。
其他文献
目的:探讨血清人附睾蛋白4(Human Epididymis Protein4,HE4)、糖类抗原125(CA125)水平及卵巢癌风险预测模型(ROME指数)在卵巢肿瘤早期诊断中的应用价值。方法:实验组为于威海
目的 研究活血止痛片质量控制方法.方法 采用TLC对活血止痛片中当归、三七、乳香、冰片和土鳖虫进行定性鉴别;采用HPLC对活血止痛片中的阿魏酸进行含量测定,色谱柱为 Hypersi
在分析国内外现有UI用户交互体验设计的视觉思想的基础上,分析了用户体验设计和视觉思维的三维交互设计实践。本文主要讨论了UI用户交互在视觉思维中的重要作用,为今后更广泛
在当今教育不断改革和发展的背景下,艺术生的群体在不断壮大。众所周知,艺术生文化课成绩普遍偏低,这无疑成了广大艺考生求学路上的一大阻碍。在文化课程中,数学往往又是艺术生最为头疼的学科。因此在教学过程中,如何调动艺术生的数学学习积极性,提升艺术生数学素养一直是人们关注的一个热点。目前,随着课程改革的推进,数学文化受到越来越多的关注。一些学者从数学文化视角探讨了提升中学生数学学业的问题,并提出了相应的数
目的:分析近5年我院95例确诊为结核性腹膜炎患者的主要临床特点,探讨其诊疗方法。方法:对新疆医科大学第一附属医院消化科从2005年1月至2009年12月收治并确诊的95例结核性腹膜
一、概述检验检测机构均应建立和保持管理体系的内部审核(内审)的程序,以验证其运作是否符合管理体系及《检验检测机构资质认定能力评价检验检测机构通用要求》(以下简称通用
探讨转化生长因子β1(TGFβ1)与高氧暴露致肺纤维化发生、发展的关系及其在肺组织的细胞来源,应用免疫组化法结合图象分析处理系统定量研究TGFβ1在高氧暴露致肺纤维化早产大
上世纪70年代年以来,全球气候变化的加剧以及人类活动明显增强,对水资源的影响愈来愈大。气候变化将改变全球水文循环的现状,导致水资源在时空上的重新分配和数量上的改变,从
白细胞介素2(IL-2)是维持细胞免疫功能的重要细胞因子,当受到抗原或有丝分裂原刺激时,能被快速诱导出来,作为自分泌和旁分泌因子参与克隆性的T细胞扩增,影响免疫应答。IL-2可
目的:观察三种植物醇提物,石榴花多酚(PFP)、毛菊苣提取物(CGE)以及鹰嘴豆总皂苷(TSCA)对2型糖尿病(T2DM)大鼠血糖血脂的影响,从不同角度初步探讨其可能的作用机理。方法:140只