基于NAO机器人情绪感知与表达的人机交互系统研究

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:oyfj2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前人机智能交互是国内外研究的热点,智能的交互方式将重新定义人类与机器人的关系,使人们的生活发生巨大的改变。在人机交互中,若机器人能够富有感情的与人类进行沟通,并像人类一样拥有观察、理解和生成各种情绪特征的能力,将会使人机交互变得更加自然。情绪信息的主要获得途径为面部表情、语义语调、肢体姿势等几个方面。本文以机器人NAO为应用平台,将深度学习和机器人结合,构建了一种基于深度分离卷积的能够根据面部表情识别实时进行肢体情绪反馈的人机交互系统。主要的创新性研究工作如下:(1)在人机交互通讯方面,采用人机交互体系服务器-客户机的分布式结构,实现了服务器端-socket-LAN-socket-客户机端的通信方式,完成了交互信息的收发和处理,增加了系统的实时性。(2)在卷积神经网络模型构建与测试中,引入深度分离卷积算法对人脸表情(恐惧、惊讶、高兴、中性、悲伤和生气)进行特征提取和分类,结果表明通过训练得到的网络模型,对FER2013人脸表情测试集的预测正确率可以达到71.1%,对单张表情图片的平均预测时间在20ms以内;(3)在机器人情绪表达设计与验证中,根据NAO机器人关节自由度范围及眼部LEDs颜色分布,为NAO机器人设计了对应六种面部情绪的肢体情绪动作,经测试验证,对机器人肢体情绪表达的识别率达到了60%;(4)在人机交互系统测试与评价中,给出了人机交互的交互模式,并对机器人实时的交互效果进行了实验验证,在每组交互实验中对连续10帧预测结果进行了统计分析,实验表明,平均交互总时间为0.079±0.010s,连续测试的表情得分比较稳定,机器人对人类的情感预测可信度较高。本文对机器人情绪感知与表达的人机交互系统进行了研究,可用于以人机智能交互为基础的康复医疗、情感陪护等领域,是未来人机交互智能化的重要发展趋势。
其他文献
近年来随着分布式能源等清洁能源的发展,配电网侧网络架构以及运行特点都发生了较大的改变,传统配电网网络分析的观点无法较好满足现有配电网的状态监控以及优化运行控制。主动配电网的相关研究成为了现在电力系统研究中极为重要的一部分,其中关于主动配电网最优潮流的研究对电力系统的规划运行尤为重要,如何有效准确地处理主动配电网最优潮流运算中分布式能源的特性成为了当前研究的热点问题。本文主要介绍了主动配电网的概念、
超级电容器具有功率密度高和使用寿命长等优点,在能量存储与转换领域有广泛的应用;芬顿氧化法是一种高级催化氧化技术,广泛用于工业废水的深度净化。金属铜具有优良的导电性和化学稳定性,价格低廉且资源丰富,铜及其氧化物既可用作类芬顿反应催化剂,又是重要的赝电容材料。本文采用电化学沉积法和原位热氧化法制备铜基薄膜,将其用作超级电容器和电化学氧化体系的电极,对其形貌、结构和元素组成进行了表征分析,对电极的电容性
我国是钢铁产能大国其中河北邯郸地区又是重要的钢铁产能大区,钢渣作为炼钢的工业副产品产量约为粗钢的十分之一。一直以来相对于欧美日等发达国家对钢渣的充分利用,我国目前对钢渣的利用率只有30%,其余大部分并没有得到适当地处理,反而占用耕地影响环境。另一方面随着我国大力发展基础设施建设,对石料的开采越来越多,造成了资源的枯竭和环境的破坏。钢渣用作道路材料较之于一般集料具有诸如表面粗燥、坚硬、耐磨等优点,但
在植物的生长过程中,蒸散作为植物水平衡运动的重要分量,对于研究植物整个生理周期的耗水规律和计算植物生理参数有着重要的意义。本文在传统大型蒸渗仪的基础上进行了改进,分别搭建了基于低功耗广域网技术的盆栽植物多点蒸散测量系统和基质栽培植物生长监测系统,实现了植物生长和生理信息的无入侵、实时、准确获取。本文的主要研究内容如下:1、开发了一套多路盆栽植物蒸散在线测量系统,系统由低功耗盆栽称重节点、网关和PC
地震勘探信号去噪是提高地震信号信噪比的关键步骤,也是地震信号处理领域非常具有挑战性的研究问题。近年来,由于变换域内的地震信号具有一定的稀疏性,基于稀疏先验的地震信号处理已逐渐成为地震勘探信号领域的研究热点之一。本文以地震信号稀疏先验为框架,对地震信号开展去噪研究,论文主要研究内容如下:(1)基于区域分割梯度直方图的地震信号去噪地震信号的梯度先验属于局部稀疏先验,基于此提出了一种基于区域分割梯度直方
水泥基复合材料作为多相非匀质混合物,往往存在夹杂、微裂缝等初始缺陷,在应力作用下这些初始缺陷扩展、汇合成宏观裂缝,最终可能导致材料的断裂破坏。为提高水泥基复合材料的抗裂能力,钢纤维作为典型的增强材料被应用其中,但在传统的钢纤维增强水泥基复合材料(SFRC)中,钢纤维随机乱向分布,部分钢纤维未能得到充分地利用。通过特定方法使钢纤维沿基体内部应力方向定向排布,可使钢纤维更好地发挥增强作用。已有研究表明
对简单纳米材料进行功能性负载,从微观层面调控材料的结构和性能,可以实现对其物理化学性能的剪裁,拓宽其应用。多孔氮化硼纳米纤维(BNNFs)不仅继承了六方氮化硼(h-BN)优异的化学稳定性、热稳定性等物理化学特性,而且同时具有高比表面积、高长径比和良好柔韧性等优点。设计并构筑基于金属氧化物纳米颗粒/多孔BN的新型纳米复合材料,可以将金属氧化物纳米颗粒以及多孔BNNFs所特有的性能结合起来,对于拓展多
在整个人类文明发展过程中,人们在不断地探索宇宙的形成和演化。在宇宙中,天体在光学波段的光谱包含着大量的物理信息,从光谱中可以得到天体的元素丰度与运动、温度、距离等一系列的信息。近年来,随着国内外众多大样本巡天计划的完成,多个光谱数据库得以建立。而LAMOST(Large Sky Area Multi-Object Fiber Spectroscopy Telescope)千万级光谱数据集的发布,为
电动汽车和大规模储能系统的快速发展促进了兼具高能量密度和低成本的新型电池更新。锂硫电池因其高能量密度(2600 Wh kg-1)引起了科研工作者的广泛关注。但在锂硫电池实际应用过程中,硫电极固有的一些弊端严重限制了其发展,这包括硫在室温下的极差导电性、充放电反应中间产物多硫化锂的穿梭效应和硫充放电产物密度相差过大等问题。氧化亚钴(CoO)作为一种极性添加剂兼具成本低廉、制备简单、吸附能力强等优势,
己二腈是一种重要的有机化工中间体,世界上生产的大部分己二腈用于加氢合成己二胺,进而用于生产尼龙66。目前,国内没有己二腈生产技术,所需己二腈全部从国外进口,严重制约了我国尼龙66产业链的发展。只有加大研发力度,突破国外技术封锁,才能提高行业话语权,促进我国尼龙66产业健康发展。本文分别以己二醛、呋喃二甲醛与离子液体型羟胺盐合成己二腈、呋喃二甲腈(可用于合成生物基己二腈)为探针反应,对二元醛与离子液