论文部分内容阅读
因人类的户外活动与地理空间位置息息相关，促使地理信息系统（Geographic Information System，GIS）的迅速发展。从空间信息可视化的视角来看，GIS是对客观地理世界的数字化描述，GIS通过空间分析获得空间信息所反映的规律和趋势，为相关应用提供新的知识，进而辅助工程设计、规划、管理和决策等服务。从空间认知的视角来看，模拟地图和二维电子地图作为地理环境的抽象模型，在形象逼真地表达空间信息方面，存在一定的局限性，而已兴起的虚拟现实(Virtual Reality，VR)技术强调用户在三维虚拟空间中的沉浸感，在一定程度上提高了人机交互性能，进而提升用户的空间认知水平。伴随着移动GIS和可穿戴计算(wearable computing)的出现，GIS被拓展到户外作业，户外增强现实(Outdoor Augmented Reality，Outdoor AR)空间信息表达致力于将虚拟空间信息叠加到真实地理场景上，增强、拓展用户对地理场景的认知。从人机界面的视角来看，目前流行的3DGIS呈现给用户一个可视化的三维虚拟世界，但绝大多数的人机交互限于平面显示器，很难让用户融入其中，户外AR技术为解决该问题提供了一种新的思路。
本文首先以户外AR和空间信息可视化表达为理论基础，深入分析两者之间结合的可行性;其次，详细设计户外AR空间信息表达的整体框架并研究其关键技术;最后，重点剖析虚实配准算法、虚实融合和人机交互等技术细节。在研究中，虚实配准是关键点和难点，本文采用两种思路解决该问题:(1)在系统分析室内AR基于标识检测的虚实配准算法基础之上，针对户外AR，提出采用基于混合硬件的虚实配准方法，即使用GPS结合三维电子罗盘获取用户头部位置和姿态数据，该方法具有完备的理论基础，但要面对相机定标这个复杂而繁琐的计算过程;(2)汲取计算机视觉中的算法思想，提出通过建立全局仿射坐标系，解算虚拟物体到真实场景图像的投影坐标，找到获取像素相对深度参数的方法，进而避开相机定标这个复杂过程。论文最后对两种思路的虚实配准方法、虚实融合及人机交互分别进行验证性实践。
人获取的75％以上的外界信息来自视觉，图像和图形是承载视觉信息量最大的媒体，而空间信息天然的具有可视化特征。本文针对基于视觉的AR空间信息表达进行集中讨论，在理论层次上，旨在增强人对空间对象及其空间分析结果形象而深层的认知，为地理信息科学的发展开辟新的研究方向，在应用层次上，旨在为户外AR系统提供空间位置相关的信息源，同时，也为空间信息可视化表达提供新的人机界面。本文具体开展了如下研究工作:
1.从理论上分析了AR与空间信息认知与表达的关系，这种关系体现在共同的认知基础和移动性，户外AR的提出和移动GIS的出现为两者的结合提供了强大的理论基础和技术方法。从增强空间认知视角出发，两者的结合为空间信息可视化表达提供了新思路和新界面。
2.分析并提出了户外AR空间信息表达的基本特征、应用及组成结构。从技术推动的视角，分析了已有的技术原型，为构建和完善户外AR空间信息表达的研究框架提供参考，提出户外AR空间信息表达的研究框架，并讨论了四个关键技术:显示设备、跟踪定位、虚实融合和人机交互。
3.提出并实践GPS结合三维电子罗盘的混合虚实配准方法。首先，分析了世界坐标、相机坐标、虚拟物体坐标、像平面坐标和像素坐标等的定义及转换关系，分析提出相机外部参数和内部参数的标定方法;其次，改进已有的室内AR基于标识检测的虚实配准算法，将其中的相对场景坐标用世界坐标替换，进而用与地理位置密切相关的空间信息来增强真实地理场景，设计了一种基于计算机视觉平面标志点的三维虚实配准算法;最后，提出采用GPS结合三维电子罗盘直接获取用户头部位置和姿态数据的基于硬件跟踪设备的虚实配准方法:通过人机交互的方式确定虚拟物体及属性信息在3D欧氏世界坐标系中的位置和姿态，采用GPS结合三维电子罗盘跟踪用户头部位置和姿态，得到从世界坐标到相机坐标的转换矩阵，已知相机内部参数的前提下，将相机坐标转换到2D像平面坐标，实现虚拟物体及属性信息与真实场景图像的合成显示。
4.提出并实践基于仿射变换技术的虚实配准方法。近距离观察地理目标时，为了避开位置跟踪和相机定标这个复杂而繁琐的过程，依据Koenderink和van Doom、Ullman和Basri于1991年提出的，已知4个非共面的三维空间特征点，那么三维空间中的任意一个点的投影变换都可以用这4个点投影的线性组合来计算的结论，建立一个由世界坐标、相机坐标和虚拟坐标合并而成的全局仿射坐标系。首先，从场景中提取4个特征点，并通过立体视觉的方法计算虚拟物体关键点的全局仿射坐标，结合4个场景特征点投影的线性组合齐次坐标表示，计算得到虚拟物体关键点的投影坐标;其次，通过向量叉乘方法获取像平面的视觉方向，得到像素的相对深度，以实现场景中物体隐藏面消隐;最后，提出2D场景图像中基准特征点的提取算法，并分析了户外虚实信息动态配准误差的产生及减少途径。
5.虚实融合和人机交互也是户外AR空间信息表达的重要特点，反应了对显示质量和对“以用户为中心”的自然高效人机交互方式的要求，本文从地理目标建模、虚实融合、人机交互三个方面进行了讨论。
本文首先以户外AR和空间信息可视化表达为理论基础，深入分析两者之间结合的可行性;其次，详细设计户外AR空间信息表达的整体框架并研究其关键技术;最后，重点剖析虚实配准算法、虚实融合和人机交互等技术细节。在研究中，虚实配准是关键点和难点，本文采用两种思路解决该问题:(1)在系统分析室内AR基于标识检测的虚实配准算法基础之上，针对户外AR，提出采用基于混合硬件的虚实配准方法，即使用GPS结合三维电子罗盘获取用户头部位置和姿态数据，该方法具有完备的理论基础，但要面对相机定标这个复杂而繁琐的计算过程;(2)汲取计算机视觉中的算法思想，提出通过建立全局仿射坐标系，解算虚拟物体到真实场景图像的投影坐标，找到获取像素相对深度参数的方法，进而避开相机定标这个复杂过程。论文最后对两种思路的虚实配准方法、虚实融合及人机交互分别进行验证性实践。
人获取的75％以上的外界信息来自视觉，图像和图形是承载视觉信息量最大的媒体，而空间信息天然的具有可视化特征。本文针对基于视觉的AR空间信息表达进行集中讨论，在理论层次上，旨在增强人对空间对象及其空间分析结果形象而深层的认知，为地理信息科学的发展开辟新的研究方向，在应用层次上，旨在为户外AR系统提供空间位置相关的信息源，同时，也为空间信息可视化表达提供新的人机界面。本文具体开展了如下研究工作:
1.从理论上分析了AR与空间信息认知与表达的关系，这种关系体现在共同的认知基础和移动性，户外AR的提出和移动GIS的出现为两者的结合提供了强大的理论基础和技术方法。从增强空间认知视角出发，两者的结合为空间信息可视化表达提供了新思路和新界面。
2.分析并提出了户外AR空间信息表达的基本特征、应用及组成结构。从技术推动的视角，分析了已有的技术原型，为构建和完善户外AR空间信息表达的研究框架提供参考，提出户外AR空间信息表达的研究框架，并讨论了四个关键技术:显示设备、跟踪定位、虚实融合和人机交互。
3.提出并实践GPS结合三维电子罗盘的混合虚实配准方法。首先，分析了世界坐标、相机坐标、虚拟物体坐标、像平面坐标和像素坐标等的定义及转换关系，分析提出相机外部参数和内部参数的标定方法;其次，改进已有的室内AR基于标识检测的虚实配准算法，将其中的相对场景坐标用世界坐标替换，进而用与地理位置密切相关的空间信息来增强真实地理场景，设计了一种基于计算机视觉平面标志点的三维虚实配准算法;最后，提出采用GPS结合三维电子罗盘直接获取用户头部位置和姿态数据的基于硬件跟踪设备的虚实配准方法:通过人机交互的方式确定虚拟物体及属性信息在3D欧氏世界坐标系中的位置和姿态，采用GPS结合三维电子罗盘跟踪用户头部位置和姿态，得到从世界坐标到相机坐标的转换矩阵，已知相机内部参数的前提下，将相机坐标转换到2D像平面坐标，实现虚拟物体及属性信息与真实场景图像的合成显示。
4.提出并实践基于仿射变换技术的虚实配准方法。近距离观察地理目标时，为了避开位置跟踪和相机定标这个复杂而繁琐的过程，依据Koenderink和van Doom、Ullman和Basri于1991年提出的，已知4个非共面的三维空间特征点，那么三维空间中的任意一个点的投影变换都可以用这4个点投影的线性组合来计算的结论，建立一个由世界坐标、相机坐标和虚拟坐标合并而成的全局仿射坐标系。首先，从场景中提取4个特征点，并通过立体视觉的方法计算虚拟物体关键点的全局仿射坐标，结合4个场景特征点投影的线性组合齐次坐标表示，计算得到虚拟物体关键点的投影坐标;其次，通过向量叉乘方法获取像平面的视觉方向，得到像素的相对深度，以实现场景中物体隐藏面消隐;最后，提出2D场景图像中基准特征点的提取算法，并分析了户外虚实信息动态配准误差的产生及减少途径。
5.虚实融合和人机交互也是户外AR空间信息表达的重要特点，反应了对显示质量和对“以用户为中心”的自然高效人机交互方式的要求，本文从地理目标建模、虚实融合、人机交互三个方面进行了讨论。