视触觉增强现实技术在康复训练中的应用研究

来源 :南京信息工程大学 | 被引量 : 0次 | 上传用户:h4975915
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实技术通过将计算机生成的感知信息或虚拟对象叠加到真实世界中,以实现对真实世界的增强,提供一种与真实世界交互的体验。触觉反馈通过使用触觉设备与虚拟环境进行交互来感知触觉信息,与人类感知信息的方式相同。视触觉增强现实技术结合增强现实技术与触觉反馈,在增强现实环境下加入力触觉感知,使操作者通过触觉设备在真实场景中与虚拟对象进行触觉交互。将视触觉增强现实技术应用于手功能康复领域,让患者在视觉和触觉的双重刺激下进行康复训练,改善手部运动功能障碍。此技术的应用不仅为患者提供了丰富的交互场景,还提供了真实的反馈力,提升了患者参与训练的积极性和主动性。本文依托于国家自然科学基金项目,结合计算机视觉和力/触觉渲染算法,开发了一个基于视触觉的增强现实手功能康复训练系统,并设计了不同反馈力的康复训练项目。本文的主要研究内容包括以下几个方面:首先,对视触觉增强现实技术的研究现状进行了分析和总结。本文提出了一种改进的ORB(Oriented Fast and Rotated BRIEF)和KLT(Kanade Lucas Tomasi)增强现实跟踪注册算法并基于此搭建增强现实环境。与目前基于自然特征的方法进行对比分析,结果表明本文的算法提高了系统的实时性。然后将触觉设备集成到增强现实环境中,提出对视触觉工作空间进行三维配准,基于视触觉空间的刚性转换对触觉设备触控笔的位置进行校准,将虚拟交互工具叠加到真实触控笔上;同时对触控笔的方向进行校准,融入触控笔的运动姿态,实现真实触控笔与虚拟交互工具的协同运动。触觉设备在场景中的出现占据了一定的位置,造成了视觉障碍,给进行触觉交互的操作者带来干扰。为实现更具真实感与沉浸感的增强现实环境,本文结合抠图算法和图像修复算法对触觉设备进行了移除和隐藏。其次,本文对所用3D Systems Touch触觉设备进行了运动学建模,建立了正逆运动学方程,对反馈力的计算方法提出改进,同时对触觉交互点与虚拟对象间产生的碰撞问题提出了解决方法。最后,本文将视触觉增强现实技术应用到康复领域中,基于所用触觉设备,结合增强现实技术设计了基于力反馈的手功能康复训练系统。该系统结合了基于反馈力的触觉渲染算法,设计了两个不同类型的康复训练项目:颠球训练和写字训练。颠球训练项目主要为了改善患者手部及腕关节的自由活动能力以及对手部力量的训练,写字训练主要锻炼患者手指的抓握能力以及力触觉感知能力。最后通过实验验证系统的可行性和实用性。
其他文献
风速、风向是大气探测中非常重要的气象要素,使用多旋翼无人机作为测风平台对提高小尺度下风速风向测量的时空分辨率有着重大意义。但是,多旋翼无人机的旋翼风场会对测风任务造成巨大干扰,这是一个亟待解决的问题。本文分析了多旋翼无人机周围流场的分布情况,优化了测风传感器的最适安装位置;根据传感器位置的空间结构,提出了自适应无人机姿态的风压正交分解测风算法;通过多传感器数据融合,提高了无人机姿态角的解算精度;设
近年来,随着无人机产业的迅速发展,无人机在航拍、植保、表演、监测等多个领域得到广泛应用。同时,由于使用门槛的不断降低,无人机使用管控方面暴露的问题也越发明显。为了对未授权的无人机飞行进行有效管控,当前提出了多种解决方案,其中使用GPS欺骗攻击对无人机的飞行进行干扰是一种相对简单且可行性较高的管控方法。利用这样的攻击可以对未授权的无人机进行驱离或者捕获,以保护区域安全和隐私。但是,当前的GPS欺骗方
气味源定位技术在生化恐怖袭击、危险物质泄漏、火灾和爆炸事故的防治中具有重要的应用价值。为提高气味源定位效率,一些学者尝试使用机器人自主地搜寻气味源。由于传统地面机器人易受地形限制,单个机器人搜寻范围有限,多无人机气味源定位具有更高的效率。但是目前有关多无人机气味源定位的研究较少,且多停留在仿真阶段,在实际应用时,存在三个难点问题:一是无人机与无人机之间以及无人机与障碍物之间的避碰问题;二是系统内部
旋翼无人机集群具有空间分布性广、功能分布性强以及系统容错性高等优势,目前已被广泛地应用于各个领域。然而,现有的旋翼无人机集群避障控制技术在复杂障碍物环境中的避障效率较低,特别是对其中的动态障碍物的避障成功率较低。针对该问题,本文以集群的快速避障为控制目标,基于有限时间一致性算法和人工势场避障算法设计快速避障控制策略,提高集群在复杂障碍物环境中的避障效率。通过计算机仿真及物理样机实验验证该策略在复杂
铁路是国民经济的大动脉,保障铁路运输安全对于国民经济和社会发展具有重大的战略意义。铁路沿线的强降雪会严重影响铁路的安全运行,危及人们的生命财产安全。铁路部门需要精准实时地监测铁路沿线的降雪强度,消除潜在的雪灾隐患,保证列车的安全运行。人工测量降雪实时性差,随机误差大,且费时费力,不符合降雪自动化观测的发展趋势,而现有的自动雪深仪由于受铁路沿线振动、强电磁干扰等复杂环境的影响,测量误差大,不适用于铁
近空间飞行器是一种新型航空航天器,军事民用价值高,发展潜力广。近空间飞行器的姿态决定其上升、下降、翻滚、转向等运动,对其姿态控制系统的研究是一项有意义的课题。本文以国内公开文献中已建立的近空间飞行器数学模型为基础,研究其在内部参数不确定、外界扰动等干扰下的姿态控制问题,研究内容如下:(1)根据国内公开的文献资料,对已有的近空间飞行器数学模型进行了详细说明,并对巡航段飞行的飞行器,基于小扰动原理,对
十九大以来,我国地铁的运营里程和客运量均居世界第一,为了立足国情、着眼全局、面向未来,国家提出了交通强国建设战略目标,地铁建设进入了新的发展阶段。但是随着城市人口的激增,早晚高峰大客流的出现,屏蔽门夹人导致乘客受伤,夹物如女士包带、安全绳等引发安全事故的报道已经出现多次,作为地铁重要的安全防护措施,人们对屏蔽门控制系统防夹功能的安全性和可靠性的要求越来越高。本文从上述屏蔽门存在的问题出发,首先针对
随着无人机在航拍、农业等领域的广泛发展与应用,对无人机自主作业的需求也日益提升。研究无人机地面管控系统,实现无人机飞行状态的实时查看、航迹规划、故障诊断等功能,对促进无人机行业的发展具有重要意义。为此,本文设计了基于WPF的无人机地面管控系统,主要工作内容如下:首先根据无人机实际作业场景,分析管控系统功能需求和非功能需求,提出系统结构设计方案和功能设计方案,并完成通信链路的搭建和主界面设计。接着开
近几年来,我国高铁取得了巨大发展,高铁里程不断创新高;迅速发展的同时也面对着很多压力,其中保障高铁的安全运行显得尤为重要。大风是危及高铁安全运行的主要气象灾害之一,特别是近年极端大风天气发生频次增多,开展高铁沿线风速时空分布特征研究至关重要。一方面,通过对高铁沿线风速时空分布特征的分析可以实现对高铁沿线的大风易发区域、空间相关性等精准感知,对高铁沿线的气象(大风)监测点的设置及优化具有指导作用;另
阴茎鳞状细胞癌(以下简称“阴茎鳞癌”)是男性泌尿生殖系统最常见的恶性肿瘤之一,通常用“分化等级”来描述其恶性程度,根据患者病理征象划分为低、中、高3种级别。分级对后续治疗方案的选择和患者生存情况的评估至关重要,是病理医生在阅片时必须做出的诊断。它同时又是一个局部的指标,即一张切片中可能含有多种等级的区域,病理医生需要评阅所有的癌区域,分析其中细胞核的异形性、分裂象等特点,大致地做出分级诊断。这样的