伴随着全球人口的增长，能源危机问题将变得日益严峻，ITER计划为解决全球性的能源问题提供了希望。我国于2006年加入ITER计划，从加入计划以来便开始对和平利用核能遇到的系列问题进行独立研究。核聚变的高温高辐射使得需要定期对内部的真空室进行维护，由于环境恶劣不适合人类直接进行维护。本文的研究工作源于国家科技部“热核聚变反应计划专项”中的子课题“精细遥操作主从机器人与人机交互控制系统”(Y2D1153101)。本文主要研究了该项目中在遥操作条件下机械手维护真空室时对周围环境感知定位的问题，主要解决相机与被操作瓦块的相对位姿测定以及操作环境重建问题。主要有以下几个方面的内容:　　1.通过介绍热核聚变反应计划专项的背景以及以遥操作方式控制机械手作业的必要性。分析遥操作过程中遇到的两个关键需求:机械手跟瓦块的相对位姿测量和机械手作业环境的三维重建。根据这两个关键需求，分析、比较了国内外相关算法的研究现状。　　2.给出了适合热核聚变反应真空室的瓦块顶点的精确提取算法。由于瓦块角点不是图像中的显著特征，使用一般性的角点提取算法往往失效。通过分析，我们发现一般性角点提取算法只是利用的灰度信息未能利用对象目标的形状等先验知识。据此，我们提出了通过利用瓦块形状这些先验知识，结合角点以及边的图像信息，通过优化梯度最大值的方式计算瓦块的角点，提高了角点提取的鲁棒性和精度。该算法为测量瓦块与相机位的相对位姿测量提供了基础。　　3.给出了基于非线性优化的实时位姿测量算法。由于真空室中可用于测量的对应点较少，使用传统方法在瓦块角点提取和瓦块角点三维坐标计算中所存在误差会极大影响测量精度。为了减少误差对位姿测量的影响，我们提出了基于非线性优化的相对位姿测量算法。该算法可以在一定程度上减少误差对位姿求解的影响。同时我们使用李群表示位姿矩阵，解决了非线性优化中收敛速度的问题，在速度方面可以满足实时测量的要求。　　4.给出了两种用于连续估计瓦块跟相机相对位姿的方法。一是基于图像金字塔的跟踪算法跟踪瓦块的顶点。该方法通过优化瓦块的顶点处图像灰度差的平方和最小得到瓦块的角点图像坐标，再根据位姿估计算法得到位姿。二是基于视觉里程计的算法。该方法通过相机移动带来的视差变化直接计算相机的位姿变化，根据位姿变化以及之前瓦块跟相机的相对位姿得到新的相对位姿。　　5.给出了该专项计划精细遥操作主从机器人与人机交互控制系统中使用的结构光仪器进行三维重建的框架。介绍了项目中实际使用的点云获取、清理、拼接、曲面化等一系列方法及三维重建中用于拼接的算法原理。