基于图神经网络的行人轨迹预测方法研究

来源 :合肥工业大学 | 被引量 : 0次 | 上传用户:dreamrain1220
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能系统的快速发展,如无人驾驶车辆、服务机器人导航、监视系统等,行人轨迹预测成为一个极具挑战性的问题。如何在高度拥挤、混乱的环境中感知、理解和预测行人的运动模式以便防止将来的碰撞变得重中之重。行人的运动不仅仅受到自身因素的影响,同时还受到周围环境的影响。针对上述问题,本文的主要研究内容如下:1.行人之间的交互是复杂多变的:单独行走、相向握手以及成群结队等,这些社交活动都会影响行人接下来的轨迹。如何将抽象的交互转变为具体的数值计算是一个复杂的问题。同时在预测阶段,预测出的行人之间也存在交互而并不是独立的轨迹,以往的研究工作均忽略了这一点。如果不能有效地对行人之间的交互进行建模,那么将会预测出错误的行人轨迹。而这对于自动驾驶等智能系统而言将会造成不可预估的危险。针对上面两个问题,本文提出一种基于图注意力的卷积长短时记忆网络模型(PTPGC),来预测多条合理的行人轨迹。首先通过设置阈值将行人以及行人之间的交互使用动态图建模。然后使用图注意力神经网络(GAT)和时序卷积网络(TCN)提取行人的时空信息特征。最后使用卷积长短时记忆网络(Conv LSTM)迭代预测行人的将来轨迹。2.以往一些研究方法存在异步分离处理行人时空信息的问题,即只考虑到行人之间的交互而忽略了行人自身的历史信息或只考虑到行人自身的历史信息而忽略了行人之间的交互影响。同时对于一些当前预测坐标依赖于上一时间步坐标信息的方法而言,随着时间的推移,预测的轨迹与真实轨迹的偏差会越来越大。如果不能对行人的时空信息和偏差有效处理,将会导致行人之间产生碰撞等严重问题。针对上述两个问题,本文提出一种基于目标网络的图注意力网络模型(GGBC)来预测行人的多条合理轨迹。首先使用图注意力长短时记忆网络(Gat LSTM)提取行人的时空信息特征。接下来预测出行人的目标分布,最后采用基于当前状态的前向和基于目标的后向卷积长短时记忆网络(FB-Conv LSTM)迭代预测行人轨迹。3.最后针对行人的多模态运动,预测单条轨迹可能存在较大误差的问题。即对于相同的历史轨迹,可能存在多条合理可行的轨迹。本文通过对预测出的行人速度二元高斯混合分布采样得到行人的多模态轨迹预测。实验表明,与现有行人轨迹预测上的基准方法相比,本文提出的模型在两个公开的行人数据集(ETH和UCY)上预测精度更高,同时生成的轨迹更加符合社会合理性和物理条件限制。
其他文献
随着信息获取技术的快速发展,互联网上产生了海量的多媒体资源,在大数据时代下,这些多模态数据的管理给传统单模态检索方式带来极大的挑战。为了能够更有效地检索出用户需求内容,所以有必要研究快速且精确的跨模态检索方法。由于不同模态数据具有不同空间分布,所以存在异构鸿沟。另外,底层表示和高层语义之间也存在语义鸿沟。如何解决跨模态数据的语义鸿沟和异构鸿沟一直是亟需解决的问题。目前大多数跨模态方法都是学习一个公
学位
视频问答任务(Video Question Answering,Video QA)旨在根据视频和基于视频的自然语言问题推断出正确答案,因此视频问答是解决从海量数据中提取需要视频内容的重要方式之一,是理解精细化视频内容的研究之一,同时也是研究跨模态信息(视频、音频以及文本)融合与推理的关键任务之一。视频是由多帧静态图像组成的动态视觉内容,相邻视频帧之间的整体内容变化往往比较微弱,因此相邻帧中的对象往
学位
恶劣环境下拍摄的图像通常会存在明显的退化现象,导致图像内容缺失,视觉质量下降。单幅图像去雨和暗光图像增强是恶劣环境下图像复原与增强的重要任务。单幅图像去雨任务旨在去除雨图中的雨纹,复原图像的本真样貌。然而图像去雨过程中往往还会出现图像纹理细节信息模糊和丢失的问题。暗光图像增强任务旨在增强暗光图像的亮度,使图像内容能够清晰完整地展现。然而暗光增强过程中往往还会出现噪声放大、细节模糊和色彩偏差的问题。
学位
随着互联网和多媒体技术的快速发展,网络上每时每刻都在产生大量的、内容复杂的视觉数据。如何利用机器学习算法自动地从复杂数据中提取出有价值的信息,进而用于处理后期的分类或聚类任务,逐渐成为了近来热门的研究课题。由于真实世界中的视觉数据通常缺少标记信息,而传统的监督学习方法需要采用费时费力人工方式进行标注,因此在应用上受到限制。相比于监督方法,半监督方法可以使用少量的有标记样本和大量的无标记样本进行学习
学位
心率是一项人体重要的生理指标,心率指标的准确监测对健康医疗和疾病预防有着重要的研究意义和实用价值。其中非接触式的心率检测方法中的远程光电容积描记术(r PPG)技术以便捷、安全和低成本的优势成为目前研究的热点。但该项技术存在一些限制,如视频冗余信息、头部运动、光照强度变化以及其他生理信号的干扰。因此,为了克服上述限制,本文设计了新颖的端到端的神经网络,学习从面部视频信息到真实心率的映射关系。主要工
学位
随着人工智能的发展,计算机作为智能设备的基础,其对于各类模态所呈现信息的理解渐渐成为研究主流。图像与文本作为日常生活中常出现的模态,二者之间的蕴涵关系推理也成为推进人工智能对于现实社会理解的重要途径。目前以图像与文本作为主要输入模态的任务有视觉问答(Visual Question Answering,VQA)、图像描述生成、文本生成图像等。视觉蕴涵推理源于文本单模态的语义蕴涵推理(Textual
学位
随着人们对生活品质的要求日益提高,食品安全也成为大众的聚焦点之一。“假烟”、“假酒”等问题层出不穷,不仅危害了正规渠道商家的利益,更危害了人民群众的身体健康。因此,材料识别研究成为了一个重要的研究方向。而随着无线通信技术的发展更加成熟,WiFi的普及率涨幅也十分迅猛,它不仅体积小、价格低,还有极强的非侵入性,部署也十分简单。因此,使用WiFi设备实现材料识别研究也越来越深入人心。本文使用了WiFi
学位
蒙特卡罗程序在医学、核辐射物理和反应堆物理等领域有广泛的应用,但其三维几何模型的低效建模方式严重影响了该方法的应用效率,因此人们希望能够利用商业CAD软件来提升蒙特卡罗程序的几何模型建模效率。但与蒙特卡罗程序采用构造实体几何表示法(Constructive Solid Geometry,CSG)不同,商业CAD软件普遍采用的是边界表示法(Boundary Representation,BRep),
学位
唇语识别是一项将说话人嘴唇区域的运动解码为文本的任务。句子级别的唇语识别能够解决聋哑人群体与正常人沟通的障碍,还能够改善在嘈杂或无声环境下的语音识别。近年来,基于深度神经网络的唇语识别方法受到广泛关注,而且准确率已经远远超过了在唇读方面有经验的人类。然而,句子级别的唇语识别领域仍然存在许多具有挑战性的问题需要解决。本文的主要研究工作如下:(1)基于通道注意力机制与选择性特征融合模块,提出一种端到端
学位
随着智能移动设备越来越多的出现在我们的日常生活,物联网对计算资源的需求不断增加,计算资源受限成为物联网所面临的新挑战。移动边缘计算(Mobile Edge Computing,MEC)的兴起很好的解决了计算问题,但是结合了MEC技术的物联网仍然存在一些问题,比如固定部署的边缘服务器在处理任务时不够灵活、边缘服务器的成本昂贵等。于是无人机辅助移动边缘计算系统被提出,利用无人机的高机动性和灵活性,提供
学位