论文部分内容阅读
全景成像技术的出现能够满足人们获取三维空间360度全方位场景信息的需求,其中将曲面反射镜和常规成像设备相结合的折反射全向成像技术,凭借一次性无缝全向成像、系统设计灵活的特点,近年来得到越来越广泛的研究和应用,已成为当前全景成像技术研究的主流方向。然而随着研究的不断深入,折反射全向成像技术固有的空间分辨率低且分布不均匀问题已成为严重限制其推广和深入应用的主要瓶颈。本文研究采用硬件设计和软件处理相结合的思路,全面系统地解决折反射全向成像的分辨率问题,从折反射全向成像系统结构着手进行创新,提出一种新颖的互补结构折反射全向成像系统设计方法,并针对性地研究全向成像系统标定、全景展开、高精度图像配准、全景图像融合及超分辨率重建等问题。本文的主要工作及创新点包括:(1)基于多个反射面的互补结构折反射全向成像系统设计方法不改变现有的折反射全向成像系统结构,仅靠后期的图像处理无法从根本上解决全向成像的分辨率问题。将多个反射镜面相结合,提出一种互补结构的折反射全向成像系统设计方法,利用多个镜面的反射作用使得同一空间点分别在全向图的内、外环互补二次成像,不仅使得全向成像的分辨率分布更加均匀,而且全向图的内环和外环之间存在显著的互补特性,为下一步进行图像融合和超分辨率增强研究提供重要基础和前提。(2)基于双向映射精确插值的折反射全向图柱面全景展开方法传统的全景展开算法并没有考虑折反射全向成像的畸变特点,图像插值时邻域点的空间位置及其与当前插值点的距离都是在全向图空间中衡量的,影响了插值精度。提出一种基于双向映射的折反射全向图展开为柱面全景图像的插值方法,通过光路跟踪得到图像间的坐标映射关系,首先将所要生成的柱面全景图像中每一点正向映射到原始的全向图中,确定插值邻域点,然后将这些邻域点逆向投影到柱面全景图像中,针对邻域点在柱面全景图像中呈非网格型分布的特点,采用非均匀二维插值算法进行图像插值运算。该方法既准确地定位插值邻域点,又避免了全向图的非线性畸变对邻域点权重计算的不利影响。(3)考虑反射镜姿态标定的互补全景图像对精确配准方法将互补结构折反射全向成像系统采集得到的全向图的内环和外环分别投影展开可得到两幅配对的柱面全景图像,高精度的配准是融合这两幅柱面全景图像进行分辨率增强研究的必要前提和基础。通过对导致这两幅柱面全景图像之间差异的原因进行深入分析,提出考虑反射镜姿态标定的互补全景图像对精确配准方法:首先,根据反射镜边沿成像的椭圆边界线对反射镜空间姿态进行标定,基于标定结果将全向图的内环和外环分别展开为两幅初步配准的柱面全景图像;然后,基于普适最小二乘法求解多项式变换模型,对两幅初步配准的全景图像进行更精确的亚像素级配准。(4)基于非下采样Contourlet变换的互补全景图像对融合方法将非下采样Contourlet变换引入互补全景图像对的融合方法研究,紧密结合两幅柱面全景图像的互补特性和各自优缺点,详细分析和研究了非下采样Contourlet变换域的低频分量和各方向高频分量的融合策略,提出了一种基于非下采样Contourlet变换的互补全景图像对融合方法,兼容了全向图内环展开的全景图像水平条纹清晰以及外环展开的全景图像垂直条纹清晰的优点。(5)基于交叉选择核回归插值的全景图像超分辨率增强方法柱面全景图像超分辨率增强问题实质就是在高分辨率的柱面全景网格上如何利用全向图内外环成像对应的两组非均匀采样点集进行插值,重建出高分辨率的柱面全景图像。将自适应核回归方法引入柱面全景图像的超分辨率插值重建问题,结合两组散乱采样点集的分布特点,在使用自适应核回归算法进行插值时选择性地区分插值参考点的来源,提出一种基于交叉选择核回归插值的全景图像超分辨率增强方法,生成一幅明显高于全向图原始采样分辨率的柱面全景图像。