基于事件相机的运动补偿方法研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:yyy021
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
事件相机是一种受人类视网膜启发的新型视觉传感器,能够以超高速率捕获场景中的亮度变化并输出一系列事件点“event”,这些事件点记录着亮度变化发生时间、位置和极性信息。相比较于传统相机,事件相机具有以下优势:高动态范围、高时间分辨率、低延迟以及低功耗。因此在高速和高动态范围等传统相机面临挑战的环境中,事件相机具有很大的潜力。然而,由于事件相机的输出特性,需要新的方法来释放其潜力。目前一个常用的方法是使用短时间内的事件流片段进行累计建帧,然后应用传统的基于图像的计算机视觉算法。建帧过程中一个重要的环节是对事件流进行运动补偿,进而消除由于相机运动导致的运动模糊。目前的运动补偿算法所使用的运动模型都是线性的,不适用于较长时间间隔和相机速度快速变化的情况。针对上述问题,本文提出了一个基于非线性运动模型的运动补偿算法。该算法巧妙地避开了现有算法中极短时间内的线性运动假设,认为相机的运动是复杂的非匀速运动,将运动参数设置为关于时间的非线性函数并使用能量最大化框架进行求解。为了防止由于噪声干扰而引起的过拟合现象,算法依据事件轨迹的连续平滑特性引入了对运动参数函数的平滑约束,显著地提高了算法的鲁棒性。最后本文给出了该算法详细的优化求解过程,并讨论了其计算复杂度和实时性优化的可行性。为了更好的评估不同算法的性能,本文提出了一个全新的评价指标——归一化能量。该指标主要取决于场景纹理复杂度和运动补偿效果,具有更好的评价性能。最后本文通过一系列实验分析了本文算法中的参数设置,并通过在公共数据集和自建数据集上定性和定量的对比实验评估了本文算法的性能。实验结果表明,本文的算法不但具有良好的抗噪声性能,还能更好地拟合事件轨迹,具有更好的运动补偿效果。而且往往建帧时间越长,本文算法的优势越明显。
其他文献
移动智能终端作为信息时代的重要代表之一,深刻影响着人类的工作和生活,在我们工作生活中的各个角落都有各种移动智能终端的身影,它们凭借各自的功能影响着人类生活,给人类的生活便利性以及工作效率带来了极大的提升。近年来,随着科技的进步以及制作工艺的逐步成熟,移动智能终端所搭载的系统功能越来越多,内置摄像头的功能越来越强大,硬件性能的大幅提升使其实时处理图像数据成为了可能。现如今,5G时代的到来和云存储技术
学位
在单目重建的过程中,常常利用运动恢复结构系统来得到各个相机之间的相对位置和部分图像特征点对应的空间点云。基于运动恢复结构系统的输出模型,使用多视图立体匹配算法(PMVS)能够进一步估计出不同图像上更多的匹配点对,来恢复出物体表面更为稠密的点云。但是,PMVS算法存在物体重建后细节丢失严重的问题,在拍摄的图片序列较少,重建物体的纹理不明显的情况下问题尤为严重。本文主要对单目三维重建系统中的稠密重建工
学位
装箱问题可以概括为将一批指定数量的不同物理特征(如重量、体积等)的货物放入指定的箱子中。装箱问题作为一个组合优化问题,广泛存在于生产生活中,并在物流运输行业中最为常见。随着经济的发展与贸易的增加,中国的货运量持续增长,国内对物流的需求也在逐渐加大,但我国物流业依旧停留在人工装载、无序运输的阶段,导致物流成本居高不下,带来了资源的浪费以及企业竞争力不足的问题。其中,装箱问题已经成为减少物流运输费用、
学位
现实世界中由于种种原因经常存在一些分辨率比较低的图像,这些低分辨率图像在如今经济飞速发展的时代已经满足不了人们日常生活和生产对图像清晰度的要求,因此超分辨率重建技术便起到至关重要的作用。超分辨率重建技术可以对低分辨率图像进行重建以生成质量较好的高分辨率图像,所以在对图像质量要求较高的场景下具有重要应用价值,如人脸识别等。通用的超分辨率重建算法应用在人脸图像的重建效果虽然表现不错,但是考虑到人脸图像
学位
21世纪多媒体技术的高速发展加速了高清显示器的普及,也使得人们对于作为重要信息载体的图像在实际生产应用场景中的质量要求越来越高。考虑到原始高清图像在获取和传输等过程中会经历不同程度的退化失真,如何从低质量的失真影像中抓取特征,获得高层视觉语言信息,最终生成细节纹理更为丰富的高质量影像,成为当前时代背景下的一个迫切需求,超分辨率重建技术在社会生产生活中的巨大应用价值与研究意义不言而喻。基于卷积神经网
学位
产品的假冒伪劣现象严重危害了消费者和商家的利益与信誉,扰乱着整个市场经济的运行。防伪技术作为解决这一问题的有效途径一直被大家所关注。目前的防伪技术都有着较好的防伪功能,但是难以实现售前防伪,消费者不易辨别等问题仍或多或少存在。随着移动端设备的快速发展,将防伪技术与数字图像处理结合可以实现快捷的智能防伪。本文通过油墨在纸张上随机扩散引入的纹理特性结合二维码索引构建防伪码,将其作为商品独一无二的标识,
学位
近年来,神经网络作为一种新兴技术手段,在解决目标识别跟踪、图像重构以及自然语言处理等很多问题上都有着出色的表现。然而,目前神经网络尚缺乏理论体系的指导,网络结构的设计通常使用试验的方式,其应用效果依赖于使用者的经验,这也在一定程度上限制了神经网络的发展与应用。因此,如何寻求神经网络的理论分析基础,并根据理论有效地指导设计网络结构也成为了当下的研究重点。本文从离散动态系统的理论角度出发,围绕与ODE
学位
等离子体分布在广袤的宇宙空间环境之中,近几十年来,随着卫星技术的发展,等离子体探测技术也趋于成熟。地球空间环境中的等离子体源自太阳日冕层加速产生的高能粒子流,一般称为太阳风,由于地磁场的阻碍作用,太阳风中的等离子体流在地球周围形成了复杂的分层空间环境。通过等离子体探测,可以获得等离子体的时空分布结构与动力学特征。本文设计并实现了星载等离子体探测系统,该系统可采用遥感方式对磁层和顶部电离层区域进行探
学位
行人再识别是智能视频监控体系中的关键技术,是针对不同视域的相机拍摄的行人图像建立匹配关系的处理过程,可以很好地增强样本间的时空关联性。目前一项新的挑战是在一些照明度不足、天气条件恶劣,如夜晚、雨雾天气等环境下,大部分模型都将很难获得具有足够表达能力的行人特征。这些问题主要是由于摄像头获取的图像被噪声所淹没,提升了有效信息的提取难度。本文主要针对含噪声图像的行人再识别问题,通过分析监控视频中图像噪声
学位
在能源互联网发展背景下,现代电力系统已逐步演化为由物理电网和信息网络构成的信息物理耦合系统,称为电力信息物理系统(Cyber Physical Power System,CPPS)。信息网络的计算、通信、控制功能,显著提升了CPPS系统的信息感知、集成、共享能力,但也引入了新的脆弱因素。在信息攻击引发的“N-K”故障中,少数关键节点同时失效可能引发级联故障,导致系统迅速崩溃。因此,准确定位信息层的
学位