平行手术中增强现实关键技术的研究

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:meiyin1109
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实技术是手术导航系统的一次重大革命,其应用十分广泛,特别是在内窥镜手术中。借助于增强现实技术,医生可以获得肉眼不可见的组织结构信息和更好的空间感知能力,大大缩短手术时间并提升手术精度。实际中的医学增强现实系统涉及到很多方面的问题,包括跟踪、配准和可视化技术等。跟踪是视点变化时的定位问题;配准是术前医学模型的定位问题;可视化是增强现实如何呈现的问题。这当中的每一项技术都存在着很多的问题和难点。本文旨在自主搭建完整的医学增强现实系统,并对其中关键性技术存在的问题进行针对性的研究,提出相应改进方案。进一步提出更具智能的平行手术框架,指出它是未来手术导航系统发展的方向。本文具体研究如下:  (1)在增强现实的跟踪技术中,围绕基于视觉的相机跟踪展开研究。从两个角度分别给出解决方案。第一个角度认为只有相机运动,针对缺乏特征的腹腔场景首次将稠密的同时定位与地图构建技术应用到内窥镜场景中。针对其中尺度缺乏和初始化困难的问题,利用多目内窥镜进行解决。这一系统结合三维配准可实现一套多目内窥镜增强现实系统。第二个角度认为只有目标物体运动,为了充分利用医学影像分割重建得到的三维模型,首次把原相机跟踪问题转化为已知三维模型的物体跟踪问题,从而将跟踪和配准统一到同一框架中。提出将互补的区域和稠密线索进行结合,提升跟踪的准确性和鲁棒性。进一步提出表观模型更新方法和遮挡处理方法来有效识别和处理遮挡情况。应用这一算法可直接实现一套单目增强现实系统。  (2)在增强现实的配准技术中,围绕三维配准展开研究。打破传统配准算法中点云的顶点间存在理想一一对应的假设,提出通过线性加权插值得到子顶点的方式建立对应点对,并分别设计了全局和局部配准的改进算法。在全局配准算法中,提出使用演化博弈理论进行子顶点权重的计算,这种权重计算方式相比于简单加权的优点是每个点的权重需要通过与其它点相互作用而得到。进一步,将相同的思想用于改进传统迭代最近点算法,提出加权顶点对应的局部配准改进算法。  (3)在增强现实的可视化技术中,围绕深度感知问题展开研究。为了提升可视化中的深度感知,设计了融合遮挡线索的不同可视化模式。进一步探索了融合深度线索的三维增强现实显示,并通过感知实验的方式探讨了深度感知问题。最后,设计了基于增强现实的虚拟手术刀交互训练系统,它一方面可以作为测试平台进行定量感知实验的测试,另一方面作为训练平台提升医生对当前内窥镜增强现实系统的视觉感知能力。  (4)为了使增强现实系统具有处理复杂场景和突发情况的能力,创新地将增强现实系统与平行理论相结合。首先,提出将平行理论应用到增强现实的同时定位与地图构建技术中的平行感知框架,目的是建立从底层视觉算法到高层决策与分析的全新理论。其次,提出包含增强现实的平行手术框架,它是平行智能在手术场景中的具体应用,也是未来手术导航系统发展的方向。  总的来说,本文对医学增强现实及其关键技术进行了深入的研究,提出了多种有效方法。希望本课题的研究能为推动该领域的发展做出贡献。
其他文献
无人机凭借其体积小、速度快、隐蔽性好和生存能力强等优点,在军事领域和民用领域等得到愈加广泛的应用。导航技术是无人机安全飞行的基础,是无人机系统的关键组成部分。无人机
生物特征识别是根据人体所固有的生理特征或行为特征来进行身份验证的技术。与计算机技术相结合,使得生物识别技术在许多领域得到了广泛的应用。作为生物特征识别方法中的一
Elman网络是一种典型的反馈网络,在过程动态建模中具有较大的优势。 本文提出了一种新型Elman网络模型——OOIHF—W—Elman(Output—add—Output input—add—hiddenfeedba
分布参数系统是用偏微分或积分方程描述的、具有无穷个自由度的系统,它的应用领域非常广泛,因此,在实际应用中,为了便于计算和工程上的实现,利用近似计算方法求解偏微分方程和处理
预测控制是一种基于模型的先进控制技术,以其建模方法多样、鲁棒性强、控制效果好等优点,在化工、机械、冶金等许多领域取得了广泛的应用。然而,作为一种建立在被控对象特征
在线优化技术能有效提高石化装置的生产技术水平,本论文针对化纤工业的龙头——精对苯二甲酸(Pure terephthalic acid,PTA)生产过程在线优化技术中的两项关键技术,即稳态检测技
车牌识别(LPR)系统是智能交通系统(ITS)的一个重要组成部分,该系统能从一幅车辆图像中自动提取车牌图像,自动分割字符,进而对字符进行识别,得到车牌的号码。其利用了图像处理
众所周知,矿产资源既是经济社会发展的基础,也是制约经济社会发展的主要因素。随着我国工业化进程的不断推进,对矿物资源的不断开发利用,具有经济价值的高品位矿石正在迅速减
电渣重熔技术作为二十世纪三十年代发展起来的一种新兴的熔炼技术,在短短的几十年间获得了快速的发展,这其中在电渣炉自动控制系统的设计、特种电渣炉的研制以及电渣熔铸技术
电弧炉是当今冶金领域最重要的炼钢设备之一,它以废钢为主要原料。在电弧炉中实现熔化和升温,最后得到温度和成分都合格的钢液。冶炼过程中对炉况的准确判断可以指导生产,从