基于深度学习的手势估计系统的设计与实现

来源 :武汉邮电科学研究院 | 被引量 : 0次 | 上传用户:huayuaneee
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自深度学习兴起以来,AI开始融入人们的日常生活,其中数字助理类的AI表现出了广阔的应用前景,如苹果公司的Siri、微软公司的Cortana。对大多数人来说,一天中的大部分活动都需借助手来完成,如开车、写字、接电话。解读手的活动可以帮助数字助理类的AI对人类的生活场景有更全面的了解,从而为用户提供更好的服务。另一方面,手势估计是以手为媒介的人机交互的关键一环。手势估计的目标是从一张包含手的RGB图像中,估计手的关键点在三维空间的相对坐标。本文设计、实现了手势估计的流水线,其包含以下子系统:(1)“手的检测”子系统,其从一张包含手的RGB图像中检测、裁剪出手,采用SSD目标检测技术实现;(2)“手的关键点估计”子系统,其从裁剪出的手的图像中,估计手的关键点在图像上的位置;(3)“手势估计”子系统,其根据手的关键点在图像上的位置,估计它们在三维空间的相对坐标。本文通过设计、实现一个手语字母识别系统,探讨了手势估计系统作为手的特征提取器的应用。本文创新点如下:(1)鉴于手的关键点估计与2D人体姿态估计的相似性,本文依据卷积姿态机的原理设计了“手的关键点估计”子系统的卷积神经网络结构;(2)本文将一个手势视为由某一规范化手势旋转而来,以此将“手势估计”子系统分解为“规范化手势估计”子系统和“视角估计”子系统,从而降低了其训练难度。
其他文献
压气机作为燃气轮机重要组成部件之一,如何提高其性能一直是主要研究方向。压气机叶片前缘的尺寸虽小,但其几何形状的变化会影响整个流场的分布,因此,对前缘进行合理的优化,
视觉监视系统是近些年来机器人和计算机视觉领域的热门研究方向之一,其主要目的是利用场景下所得到的一系列图像检测和跟踪特定目标。视觉监视系统在生产生活中得到了广泛的
钢铁业面对日益突显的能源紧缺、环境污染和严峻的钢铁市场形势,企业唯有依托国家节能减有排政策,大力支持技术创新,利用技术创新来获取新产品、新工艺、新技术,为企业实现更
以水泥砂浆为锚固剂的锚杆属于粘结型锚杆。它在水电、金属矿山、土木交通和地质灾害领域应用得比较多,其支护效果在工程灾害防治和调控上起着重要的作用。由于我国经济发展,
PPP(Public-Private-Partnership)作为改善公共服务供给机制的一种融资模式,不仅可以有效的缓解政府财政支出的压力,还极大的推进了我国基础设施的建设。PPP模式下准经营项目
主题发现和演化一直是自然语言处理领域的研究热点。主题发现是指从大的语料库中抽取出关键词组,能够简洁地表示出这个语料库的概述信息。主题演化是指发现主题的内容或者强
孪生支持向量回归机(Twin Support Vector Regression,TSVR)是一种有效的机器学习方法。由于TSVR只需求解一对规模较小的二次规划问题,每个二次规划问题的约束条件仅为支持向
在地震作用下,混合式交错桁架结构空腹节间两侧斜腹杆被压屈或拉断,导致结构发生脆性破坏。为改善该结构抗震性能,提出延性交错桁架结构的概念:将桁架跨中空腹节间设计为延性
自2013年习近平主席在哈萨克斯坦首都阿斯塔纳提出“一带一路”倡议以来,中国与哈萨克斯坦的经济合作迈上了新台阶。几年来,在“一带一路”与哈萨克斯坦“光明之路”新经济计
光致电化学生物分析技术作为一种最先进的生物分析技术,因具有操作简单、响应速度快、成本较低、低背景、高灵敏度等优点而受到了广泛的应用。截止到目前为止,光致电化学生物