基于时—空卷积神经网络的RSVP目标检测

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:SONGZHIQIANGAAAA
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网的快速发展给现代社会带来了海量的信息,在涉及到处理图像信息的许多领域,图像分析人员所面临的一个巨大挑战成为了如何从海量图片中快速高效地获取感兴趣的目标图像。尽管计算机视觉系统已经可以快速而准确地完成目标识别,然而对于一些低质图片的处理效果仍达不到理想状态。脑机接口可以将用户的大脑活动模式转换成一个简单的消息或指令,是一种新的人机交互方式。基于快速序列视觉呈现(RSVP)范式的脑机接口系统为利用人类视觉系统实现高效的目标图像检测提供了可能,人类视觉系统强大的信息处理能力和现代脑电信号处理算法的快速分析能力得以共同发挥作用。因此,提高基于RSVP的脑机接口系统中脑电信号的识别准确率成为了该系统有效工作的关键。传统机器学习算法和深度学习模型在图像和语音处理领域取得了显著的效果,这也引起了脑电信号处理领域研究者们的注意。脑电信号具有低信噪比、非平稳和特异性强等固有特性,这是分析处理脑电信号时所面临的最大问题。针对这些问题,现有的算法和模型提出了不同的解决方案,旨在实现脑电信号的高效分类,且已经取得了可观的效果。然而,现有的算法和模型在分析处理脑电信号时,忽视了RSVP范式下脑电信号的相位锁定特性和电极分布位置信息,这些信息有助于分类脑电信号。本文从RSVP范式下脑电信号的关键特性出发,学习借鉴了当前主流深度学习模型的设计框架,提出了基于时域相位保持的卷积神经网络。该网络在设计时充分考虑了信号在时域的相位信息,提取到了脑电信号更有表征能力的特征表示。为了验证所提出的模型的性能,本文介绍了两个公开数据集和一个本地数据集,在这三个数据集上将所提出的卷积神经网络与现有的优秀算法和模型进行了性能对比,结果表明所提出模型的分类准确率显著高于现有方法。在此基础上,又提出了基于时域相位保持-空域脑拓扑结构的卷积神经网络,该时空卷积神经网络充分挖掘了信号在空域的电极分布位置信息,提取到脑电信号的时空表征用于分类,模型的优越性能在两个数据集上得到了验证。此外,本文对于分类性能对比实验做了进一步的分析和讨论,探讨了不同模型参数对模型性能的影响。进行了时域和空域的特征可视化,结果不仅证明了所提出模型高效的特征提取能力,还与神经科学领域的研究结论所吻合,再次验证了本文方法的有效性。
其他文献
随着遥感技术的不断发展,对遥感影像的智能解译和分析成为一个热点研究问题。高光谱图像作为遥感影像的一种,具有光谱波段丰富、空间分辨率高的特点,携带了丰富的对于地面观测和分析有用的信息。高光谱图像分类作为高光谱遥感的一项基础任务,能够为分析地表信息带来极大的便利,并为后续其他遥感影像智能解译的应用提供基础。随着深度学习理论的不断发展,把深度学习应用到高光谱图像分类中将进一步加快遥感影像的智能解译进程。
学位
恶意软件使用加密流量躲避网络分析和检测已屡见不鲜,而近年来随着审查规避技术日新月异,恶意软件为了更有效地规避网络审查而滥用这一技术不断更新换代,以致审查规避类加密恶意流量呈现出变化迅速、种类多样、攻击性强、隐蔽性高等特点,而且还出现了针对机器学习算法本身的对抗性攻击,导致目前1)针对传统加密恶意流量的特征集已不能保证对审查规避类加密恶意流量的表征能力;2)常用的权威流量数据集无法涵盖日新月异的审查
学位
随着深度学习理论的不断发展,深度学习在目标跟踪领域中的应用研究也在不断深入。基于深度学习的目标跟踪算法在大量数据的驱动下,能够取得较好的目标跟踪效果。其中基于孪生神经网络的目标跟踪算法利用孪生神经网络结构相同、权重共享的特性,将跟踪任务作为模板匹配问题,提高了跟踪算法的效率。虽然现有的目标跟踪算法已取得了较好的效果,但是由于跟踪任务中存在着许多挑战因素,例如目标自身形变以及光照、背景杂斑等环境因素
学位
红外成像系统凭借其自身的优点被广泛应用于军事和民用领域,尤其自新冠疫情爆发以来,红外热成像系统更是被广泛地应用于对通行人员体温的实时检测等。然而,由于红外成像系统中焦平面阵列存在非均匀性,严重影响了系统成像质量和系统性能。引起红外焦平面阵列非均匀性的主要原因是由于制作工艺水平受限导致探测单元响应不一致。为了弥补因为工艺水平受限等原因导致的成像质量差的问题,学者研究了红外焦平面非均匀性校正算法,提升
学位
遥感技术的迅速发展极大的降低了高质量高分辨率的遥感图像的获取难度,这也解决了遥感图像地物分类任务的数据获取问题。如今,遥感图像地物分类领域面临着如下问题:一方面,遥感图像拍摄的场景通常比较复杂,基于传统图像处理的地物分类方法的特征提取能力有限,不能满足复杂场景的应用需求;另一方面,基于深度学习的遥感图像地物分类算法的训练数据需要进行像素级标注,其标注成本较高,使得大量的数据未被标注,导致这部分数据
学位
近些年,随着遥感和卫星技术的发展,多种类型的传感器获取遥感影像数据(多源遥感数据)的规模与日俱增,这给遥感影像的场景解译提出了严峻的挑战。本文针对的是跨源遥感图像检索任务,和一般的跨模态检索任务相比。一方面,高分辨率遥感影像包含的内容复杂,所以单场景包含的目标大小、类别变化多样。另一方面,由于不同传感器获取的遥感影像在分辨率、图像通道等方面的不同。例如,全色图像相较于多光谱图像缺少颜色信息,而多光
学位
光学合成孔径成像技术是实现超大孔径光学系统的一种重要且有效的途径,也是未来地基望远镜和天基光学遥感器的主要发展方向之一。它采用多个小孔径构成阵列合成大孔径系统的方式来实现高分辨成像。与传统大口径成像相比,光学合成孔径成像系统具有加工难度低,成本低,重量轻,体积小,组装设计灵活等优势。然而,合成孔径系统是子孔径的填充,频谱响应低,通常采用对其进行子孔径排布优化的方式提高分辨率,但此方法在面向深空探测
学位
目标检测是计算机视觉领域基础且重要的研究方向之一。当输入图像时,目标检测算法要给出图像中不同目标的类别和位置坐标。近些年来,研究人员在该领域进行了大量的研究工作,并取得了一些突破性的进展,但是目标检测算法仍然面临着诸多挑战,例如真实场景中不同目标的尺寸、长宽比、遮挡和模糊等情况都对算法的鲁棒性和准确性提出了更高要求,准确、高效地对目标进行定位需要目标检测算法具有更强的特征分辨能力和边框定位能力。本
学位
SiC复材构件具有多孔隙、非匀质的特点,通过CT扫描得到的切片图像特征复杂,疑似缺陷的孔隙数量较多,人眼难以鉴别。为了精准得到复材构件的内部结构,需要使用高分辨率CT扫描仪扫描,经济成本高。在实际工业场景中,缺陷样本数量少且较难获取,且正常样本与异常样本存在类别不均衡问题。现有监督学习方法未能很好的解决上述问题,而基于表征学习的生成式算法仅利用正常样本训练期望获得正常区域的表征模型,通过对比正常区
学位
异常事件检测在计算机视觉任务中是一个重要的研究方向,主要应用在智能监控、灾难预警等领域。对密集人群中发生的斗殴,枪击,恐慌等危险行为进行监控和预警是异常事件检测的重要应用之一。在线的异常事件检测任务目标是对摄像头实时捕获的视频流数据进行预处理和解译,检测是否存在异常事件。针对该任务存在场景复杂,异常事件发生频次低,受限制的设备端进行边缘部署等难点,本文在行为识别算法ECO的基础上进行了多方面改进工
学位