基于表面肌电信号的双通道实时手势识别系统研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:wtmw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
生命体的生命过程都在产生电信号,我们称之为生物电。生物电信号的产生是由于生物细胞受到刺激而引起的细胞膜电位不断变化。它可以在体内迅速传播开,从而在体表的不同位置产生不同的电位。正是这种电位差的存在,使得生物电信号能够被检测和分析。复杂的生物电的产生和生命状态息息相关,蕴含着丰富的生理和病理的信息,所以被广泛应用于疾病诊断、病情状态监控和康复训练等领域。常见的、应用较为广泛的生物电信号有脑电、肌电和心电三种。其中,表面肌电(s EMG)信号作为肌电信号采集的无创手段,在学术界和产业界受到广泛关注,是无创人机接口的关键技术,在人机交互领域有良好的应用前景。s EMG信号目前已广泛应用于手势识别、假肢控制、肌肉疲劳检测等领域。s EMG信号的检测主要有两种采集方法:多通道检测和高密度检测。目前的技术多通道检测精度较低;而高密度检测的计算量较大。为了更好地应用于普通用户,有必要搭建一个精度高、实时性好、所需计算量小、操作简单的手势识别系统。本文提出并实现了一个基于Open BCI和Python的多通道实时手势识别系统,该系统可以对s EMG信号进行采集、实时处理和分析。数据处理和分析包括数据清洗、数据预处理、特征提取和分类器识别等。此外,还设计了一个用户界面(GUI)程序,实现了数据实时可视化和识别结果的实时反馈。通过实际测验,验证了所设计的识别系统的可行性。论文结合了图像识别领域中的静态图的概念,将静态数据设计为传感器在维持手部最终动作时采集到的数据;提出了一种实时数据与静态数据匹配的方法,即静态识别,避免了转换手势的标记。最后,论文还提出了一种基于一维卷积神经网络-独立循环神经网络(Conv1D-Ind RNN)模型的手势识别算法,进一步提高了实时手势识别系统的准确率;通过开源数据集和Open BCI采集的数据共同验证了该算法的可行性。本系统相比传统s EMG手势识别系统具有硬件成本低、算法紧凑高效、实时性好等优点。论文的主要研究内容和创新如下:1.基于Open BCI和Python语言的s EMG双通道实时手势识别系统的搭建。开发了基于Open BCI和Python语言的双通道实时识别系统对应的PC端GUI程序。PC与Open BCI硬件通过蓝牙相连,GUI程序实现了对蓝牙数据的接收、处理、实时显示、存储以及分类识别功能。设计了随机森林、支持向量机、人工神经网络、一维卷积神经网络和卷积神经网络-门控循环单元(Conv1D-GRU)五种模型,分别对双通道、三种手势及其均方根、平均绝对值、方差、简单平方积分、短时傅里叶变换的振幅谱总和、中值频率六种特征的s EMG信号进行分析处理。其中,基于Conv1D-GRU模型的方法对5个测试者的静态数据可以达到99%的精确率和召回率,而在实时测验中准确率达到了96.7%。据统计,整个GUI的平均更新时间不到120 ms,满足实时需求。2.基于Conv1D-Ind RNN网络的手势识别方法的提出。在本文设计的基于Open BCI和Python语言的双通道实时识别系统的基础上,引入Ind RNN网络并设计了Conv1D-Ind RNN混合模型。利用一层1D卷积神经网络和两层Ind RNN层分别提取通道内和通道间的特征,将时间序列信号的空间特征和时间特征相结合。该模型评估了开源数据集Ninapro子数据集DB5中来自10个受试者的18种手势信号,仅使用均方根一种特征、10个Epochs,就实现了同一数据集下的最新模型相当的效果,达到了87.43%的准确率。更重要的是我们的模型参数数量只有5278,远远低于现有模型。接着将该模型运用到本文搭建的双通道实时识别系统上,10个受试者的准确率达到了99.1%。3.验证系统和模型的可行性。募集了5个测试者对论文提出的基于Open BCI和Python语言的双通道实时识别系统进行了验证,验证采用三种基本手势、两路差分信号输入,经典机器学习分类算法,实验结果证明了该系统的可行性;通过开源数据集和Open BCI识别实验,验证了Conv1D-Ind RNN混合模型的可行性和识别效果,证明了模型的鲁棒性。
其他文献
随着我国社会经济发展和城市化进程的不断推进,居民生活水平发生了巨大变化,人们越来越重视住宅的舒适度及周围生活环境的便捷、优美。满足居民对住宅的新需求是建筑设计人员需要深入探究的问题。基于此,结合某住宅项目,从规划设计构思、布局、建筑设计3个方面对住宅规划设计相关问题展开分析及研究。
根据我国设施蔬菜种植生产实际,针对叶菜类蔬菜收获的特点与难题,设计了一款智能叶菜类蔬菜收割机。该机通过4个轮毂电机驱动,能够在狭小的棚室空间灵活转弯和转向。在蔬菜收割过程中,能够根据地面高低起伏,自动调解刀架高度,从而控制割茬高度。针对其中的关键机构即四轮驱动差速转向水平微调行走机构的设计、工作原理进行了详细阐述,计算了行走机构工作参数,确定了行走电机参数。机架有限元分析结果表明,最大应力发生在切
本文基于2018年全国流动人口卫生计生动态监测数据,运用多层线性模型分析了社区和个体两个层面的健康资源对于流动老人居留意愿的影响,并探讨社区因素对个体因素的“跨层”效应,研究发现,首先社区健康资源供给和个体健康资源利用不同的流动老人,居留意愿和居留时间表现出差异性;其次个体健康资源利用和社区健康资源的供给越多的流动老人,居留意愿越强烈,意愿居留时间越久;最后社区因素不仅直接影响老年流动人口的居留意
沙漠化是河西走廊荒漠绿洲过渡带土地退化的主要原因,科学合理的治沙措施能够有效控制风沙侵害,有助于植被—土壤系统的重建与恢复。多年来,治沙措施的研究主要集中在不同时间梯度下某种给定措施对植物群落及土壤的影响方面,对于同一时间段内不同类型措施产生的生态惠益尚缺乏足够认识。鉴于此,以流动沙地丘间地为对照,选取围栏封育+麦草沙障(Ge+Ws)、麦草沙障+人工梭梭(Ws+H)和尼龙沙障+人工梭梭(Nn+H)
我国煤炭储量居世界首位,目前已探明的煤炭储量约有1万亿吨,预测煤炭储量达5亿吨。目前火电装机容量比例占全国总装机的60%以上,每年耗煤量达35亿吨左右。我国煤炭资源分布西多东少,北丰南贫,煤炭种类繁多,对火电厂而言,如何加强煤场管理,将数字化智能技术用于煤场进厂煤、掺配、入炉煤计量、采样化验、堆取煤、煤场监控等,从而达到煤场管理的经济性。火力发电作为高碳排放的行业,
期刊
三岁的球球洗澡时,把泡泡弄得浴室里到处都是。画画的时候纸用完了,球球就用颜料直接在墙上画。妈妈下班回来,看见墙上到处都是颜料,气得火冒三丈,大声训斥球球,球球吓得浑身发抖哇哇大哭起来。3—6岁儿童因为好奇心和自主性的发展,会对这个世界做一些自我的探索。他们希望发展出更多技能,希望对世界有更多探索。在对世界探索的过程中,因为还不具备完成一些技能的能力,他们可能出现一些在家长看来是“不良行为”的
期刊
Alzheimer病(AD)由于中枢神经系统退行性病变,导致日常生活能力下降,行为紊乱,认知功能减退,严重影响患者生活质量,给家庭及社会来带来沉重负担。AD病人的处理包括良好的护理、精神症状的对症治疗及认知与记忆障碍的探索性药物治疗三方面。迄今尚无一种药物能逆转AD的脑病理改变,胆碱能加强剂属治疗AD的首选药物,先前用Ach前体药物增加Ach的合成治疗AD,见效甚微。近几年经FDA批准陆续上市的几
喜欢问问题,对新事物充满好奇;能独立参与活动或游戏,且在过程中保持热情和投入;即使做一件事花费较长时间,也会努力尝试;爱思考,经常有新点子;善于总结,能解释自己的行为和决定。当幼儿具有以上这些表现,我们可以判断,幼儿具有良好的学习品质。
期刊
阐述在线开放课程的特点,液压与气动技术及应用课程的教学实践,在课程结构、教学内容、教学模式进行系统化设计,采用灵活的模块化课程内容设置,满足学生的选课需求。
“你怎么总是磨磨蹭蹭,说多少遍了,就是不听!”“一到写作业就要喝水、上卫生间,遇到难题就不认真思考!”类似这样的场景,似乎总在身边上演。家长“炮火味”十足的指责,没有换来理想的改变,孩子继续充耳不闻,甚至久久压抑后奋起反抗,亲子关系如同一条绷紧了的弦,稍稍再用力就会崩断。
期刊