【摘 要】
:
手势动作是肢体活动中最灵活自由、最具表现力、受限度最低的一种动作类型,被广泛地应用在人机交互中。表面肌电信号(Surface,Electromyography,s EMG)是伴随肌肉收缩产生的一种重要生物信号,直接反映人体运动意图,不受环境因素影响。因此,基于s EMG的手势识别成为自然人机交互研究中的热点。自然的人机交互系统不仅要提供机器人与人之间友好的动作交互,而且要提供情绪交互。自动面部表情
论文部分内容阅读
手势动作是肢体活动中最灵活自由、最具表现力、受限度最低的一种动作类型,被广泛地应用在人机交互中。表面肌电信号(Surface,Electromyography,s EMG)是伴随肌肉收缩产生的一种重要生物信号,直接反映人体运动意图,不受环境因素影响。因此,基于s EMG的手势识别成为自然人机交互研究中的热点。自然的人机交互系统不仅要提供机器人与人之间友好的动作交互,而且要提供情绪交互。自动面部表情识别(Facial expression recognition,FER)使机器人能够理解人类情绪变化,有助于用户情绪健康,成为人机交互的重要内容。然而,目前大多数商用或实验室研制的肌电信号采集系统虽可以无线传输数据,但该类设备的可用通道数较少或柔软性、便携性差或识别手势数量少。另外,在复杂自然场景下的FER任务仍是一个挑战性问题。针对上述问题和面向自然人机交互对于物理交互和情绪交互两方面的应用需求,本文将对手势与表情识别技术及其在自然人机交互中的应用进行研究,主要工作包括:(1)设计手势感知、识别与控制系统整体方案。构建基于s EMG的手势感知系统。设计与实现智能可穿戴式臂环(SWA)。测试SWA对上肢s EMG信号的采集、预处理和无线传输功能,验证本研究构建的基于s EMG的手势感知的可行性与有效性,为本文后续s EMG信号特征提取与优选、基于机器学习的手势识别与交互奠定基础。(2)基于本研究构建的手势感知系统,研究9种机器学习算法和5种归一化方法对6种分类器性能指标的影响。研究最优电极采集位置以及传感器通道数量,采用遗传算法优选特征。9种手势平均离线准确率和实时准确率分别为99.88%和96.20%,五指灵巧手实时模仿用户手势,验证基于s EMG的手势感知系统的可靠性、基于机器学习的手势识别算法的高效性和在自然人机交互中手势交互的实用性。(3)在面向自然人机交互的表情识别与表情驱动方面,针对复杂自然场景下的表情数据集存在的样本不平衡问题,提出基于c GAN的深度网络模型用于人脸表情识别,解耦人脸情绪表征与其他变量(如身份等),进行表情编辑与样本平衡。提出的算法在两个公开表情数据集(Affect Net和RAF-DB)上优于其他已知算法,验证基于机器学习的表情识别算法的有效性。设计运动单元(AUs)和Unity3D变形目标(MTs)的映射关系,捕获、解析与驱动面部表情,实现3D虚拟人物实时模仿用户面部表情,验证基于运动单元(AUs)驱动虚拟人物表情应用于自然人机交互中表情交互的可行性。
其他文献
本研究以番茄叶霉病的抗病的纯合基因型(Cf-5/Cf-5)、抗病杂合基因(Cf-5/cf-5)和感病纯合基因型(cf-5/cf-5),番茄枯萎病的抗病纯合基因型(I-2/I-2)、抗病杂合基因型(I-2/i-2)
软岩岩性较弱,在外力作用下易发生破碎,遇水软化后破碎现象更加显著,从而产生较大程度的湿化变形。若将其用作路基填料易导致路面受损破坏,影响路用功能及行车安全。软岩的颗粒破碎现象是导致其遇水后湿化变形的一个重要因素,但目前对湿化过程中颗粒破碎规律的研究较少。本文以软岩为研究对象,基于三轴压缩试验分析了软岩在风干及饱和状态下的颗粒破碎及变形规律;结合颗粒流方法进行分析试验,主要得到以下研究结果:(1)借
拉曼光谱是分子振动的指纹光谱,能够表征癌变细胞的生物分子变化,其无标、无损的特性使其在临床癌细胞识别中具有广阔的应用前景。自发拉曼光谱信号较弱,在临床癌细胞检测中
本试验系统研究高酯型儿茶素速溶茶的抗菌作用和高酯型儿茶素速溶茶对海绵蛋糕、大黄鱼、月季鲜切花的贮藏保鲜作用效果,为高酯型儿茶素速溶茶在食品、水产品、鲜切花领域的
在传统光电成像技术的研究中,光电探测主要是采集目标的反射光强度与光谱信息,如传统的强度成像、多光谱成像、高光谱成像等方法。传统成像方法获取的目标信息单一,且易受到
近年来,随着大气监测、地物信息反演、军事目标识别等领域对光学遥感信息量需求的增加和遥感信息获取技术的飞速发展,出现了一种新型遥感信息探测技术——偏振光谱成像技术。
重金属污染是公众广泛关注的环境问题。重金属可存在于各种环境介质中,通过接触暴露使人体健康受到危害。因此,快速,灵敏和特异性地测定环境中的重金属的含量具有重要的实际意义。电化学技术用于重金属离子检测具有其本身固有的优势:样品无需复杂前处理即可直接测定,且具有快速,灵敏度高,选择性好,操作简单,成本低,便携性及可现场检测等多种优点。本文利用纳米材料特有的物理化学性质构建具有稳定性良好、灵敏度高、检测快
近几十年来,空间光学遥感技术迅速发展。光学遥感图像由多光谱发展进入到高光谱的新阶段。高光谱图像具有高的光谱分辨率、空谱结合等优点,在民用领域和军事领域得到了广泛应
交通作为连接旅游客源地与目的地的重要方式,为旅游业的发展提供了更多动力。旅游地交通的发达程度直接关系到旅游者的总体支出,进而影响着游客对于旅游目的地的选择,所以对
随着计算机互联网行业的蓬勃发展,互联网所提供的服务已经涵盖了人们生活的方方面面,互联网提供的服务主要通过网页的形式呈现给用户使用,信息搜索已成为互联网中最有价值的