基于深度相机的手部动作学习辅助系统的设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:color5188
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
乐器演奏的初学过程中,练习标准的指法是非常重要的环节。练习初期如果缺少老师的指导,可能会导致指法变形或出现错误,在初学者形成习惯后难以纠正,导致降低学习效果、增大学习难度,甚至影响初学者的学习热情。本文即针对这一现实生活中的问题,以古筝指法学习为应用场景,设计并实现了一种手部动作学习辅助系统,为古筝的初学者提供指法练习的辅助功能。该系统可以为古筝初学者进行基础指法的演示,并利用深度相机设备采集其演奏指法,与示范的标准指法进行比较以针对指法中的错误进行提示,从而实现在缺少老师指导的情况下对初学者的自主练习进行辅助的功能。本文首先介绍了相关的研究背景和意义,通过查阅国内外的相关研究资料,对乐器学习辅助技术以及手部识别的相关技术进行了调研和概述,总结其特点和不足,确定课题的研究目标和研究内容;然后本文对系统设计和实现过程中所涉及的相关技术进行了介绍;第三章中本文主要基于古筝指法练习辅助的应用场景,明确系统的用户群体,并对系统的各个功能进行了需求分析;第四章中本文设计了系统的整体架构,划分了图像采集、数据处理、姿态估计、指法捕捉、指法分类和评价、评价结果可视化以及数据处理等功能模块,并针对指法评价这一问题,提出了一种基于手部姿态估计和动态时间规整的方案,同时详细阐述了各个模块相关类的方法和属性,具体地说明了系统各个模块在工作时的相互关系;第五章中本文对系统的各个模块进行了功能测试,并对测试结果进行了分析;本文最后对课题的工作进行了总结,并说明了系统可能的优化点。本文所实现的针对指法练习场景的辅助系统,可以实现对用户指法标准度的评价,为用户自主练习提供参考,从而实现辅助功能,解决教师资源有限的问题;此外,本文提出的基于手部姿态估计和动态时间规整的指法评价方案,也为利用手部动作评价方法解决现实问题提供了新的思路。
其他文献
随着互联网的发展与大数据时代的来临,网络数据存储总量迎来了爆炸式增长,人类的日常生活已经与数据密不可分,每个人都是信息的接受者。但是在海量的网络数据中却存在许多令人烦心的广告,比如高利贷广告,带有社交账号的诈骗广告及境外违法网站的广告等。目前许多网站都会采用关键词屏蔽的方式封禁文本格式的广告,由于图片比文本更具有隐蔽性,有一部分广告采取了在图片中嵌入文字的方式,因此许多平台不能分辨用户上传到服务器
城市污水达一级A标准的出水深度处理是减轻水环境污染的重要手段,低浓度污水深度处理是水处理领域研究热点之一。本课题采用臭氧-好氧-缺氧组合工艺(O3+OA,内装活性焦填料,简称臭氧生物活性焦组合工艺)深度处理达一级A标准的出水,同时设置臭氧-好氧-缺氧组合工艺(O3+OA,内装悬浮塑料填料,简称臭氧生物膜组合工艺)作为对照,研究两组工艺在臭氧氧化、好氧和缺氧反应阶段COD和氮的去除效果,并确定臭氧生
印度—欧亚碰撞带是地球上最大的陆—陆碰撞体系,是大陆岩石圈收缩变形的一次大规模地质构造,也是大陆碰撞带中最大的伸展构造活动实例,因此它引起了全球地质学家和地球物理学家的广泛关注,科学家们获得了越来越多的地质和地球物理数据。对于青藏高原的地球动力学模型已经做了许多研究,强调了碰撞带的演化历史和目前的动力学状态,提出了青藏高原构造伸展的许多原因与假设,但这些学说都没有得到普遍的认可,青藏高原的活动构造
吲哚分子结构广泛存在于各种天然产物中,有些具有很强的生物活性。在吲哚的众多衍生物中,2-芳酰基吲哚作为具有特殊药物活性的分子,对肿瘤细胞有很好的抑制作用,其合成受到广大化学工作者的关注。常见的合成方法存在反应条件比较苛刻、步骤比较复杂、有的需要有毒气体CO的参与等问题。本课题希望开发出温和、高效且环境污染小的新方法来制备2-芳酰基吲哚。通过对反应时间的控制,探究整个反应的进程与趋势,通过反应机理的
随着一带一路的大力发展,中国与东南亚各国的交流也逐渐频繁,中国和老挝国自古以来关系密切,语言作为重要的交流工具,加强对老挝语的信息化研究,也会促进两国的经济贸易水平。命名实体识别作为自然语言处理方向的重要基础研究点,也是难点。目前中文和英文的命名实体识别已经开展较多的研究,也取得不少的研究成果。但是对于老挝语的研究起步比较晚,相应的研究较少,命名实体识别领域细分方向较多,其中主要以识别组织机构名、
计算机辅助工业设计为现代工业设计模式带来了根本性的变革,通过数字化、可视化的建模流程,极大提升设计的效率与科学性。计算机辅助工业设计正逐步向智能化发展,随着人工智能技术在各个领域的落地应用,为工业设计智能化提供参考。工业设计对设计的效率以及创意性提出了要求,人工智能技术中学习与推理等能力,可以为工业设计智能化提供支持。本文基于人工智能技术提出一种用于智能合成3D物体外观的深度学习算法,旨在解决工业
随着我国经济实力的增长,车辆的数量逐年增加,对车辆导航系统的性能要求也越来越高,传统的导航系统已经不能满足需求,需要设计能在地下车库、隧道、森林等特殊地形行驶中保持良好导航精度的全陆地无缝导航系统。但由于光纤陀螺等高精度军用车载导航器件成本太高,无法大规模普及,所以研制一种低成本车载导航系统具有巨大发展前景。课题以低成本组合导航系统的设计为研究方向,通过引入CAN总线提供里程计速度并实时监控车辆信
物联网(Internet of Things)可以通过无线射频识别、红外传感器、激光扫描仪等信息传感设备,将多个对象连接在因特网中进行信息交换,以达到智能分析和处理的目的。无线射频识别(Radio Frequency Identification,RFID)以其成本低廉、无接触式的自动化识别等特点,已成为物联网信息获取的主要手段,并已在智慧医疗、库存管理等领域取得了广泛的应用。虽然RFID系统的开
企业融资问题一直以来都是财务理论研究中的一大热点,它与公司治理、公司成长、公司战略和公司价值之间存在着深刻的内在联系。近年来,随着资本市场逐渐发展,资本市场融资的功能逐步被完善,企业融资规模也呈现快速增长的趋势。有很多、很复杂的内部因素和外部因素会影响到企业的融资决策。国外学者提出了优序融资理论,认为企业在融资顺序的选择上依次为内源融资、债务融资、股权融资,而我国企业在融资方式的选择上是否遵循该理
室内实时高精度定位技术需求不断增强。超宽带(Ultra Wide Band,UWB)技术[1]传输速率高、发射功率低、抗干扰和穿透能力强。在室内可视范围传输有很好的定位性能。现代工业和生活对智能化无人车的定位和路径跟踪技术需求正在向智能性、灵活性、快捷性、多协同性方向发展。课题主要研究室内超宽带定位技术和路径跟踪控制算法,实现无人车在超宽带定位平台下,按照预定路径进行跟踪控制运动。定位功能可以便捷