【摘 要】
:
本文针对已有视频描述方法中提取的特征难以捕获视频中对象之间的相互联系,以及解码过程中难以充分利用特征重构视频信息的现状,提出一种结合消息传递网络和分层解码器的视频描述系统.首先,利用卷积神经网络和对象检测器提取视频的二维特征、三维特征以及对象特征;然后,使用消息传递网络来更新对象特征,添加对象之间的联系信息;接着,利用时空注意力模块将所有特征进行融合得到视频整体特征;最后,利用分层解码器解码整体特征来获得视频的描述.实验结果显示,该系统能够准确生成对视频内容的描述,并且生成的描述更能体现出对象之间的联系.
【机 构】
:
杭州电子科技大学计算机学院 杭州 310018
论文部分内容阅读
本文针对已有视频描述方法中提取的特征难以捕获视频中对象之间的相互联系,以及解码过程中难以充分利用特征重构视频信息的现状,提出一种结合消息传递网络和分层解码器的视频描述系统.首先,利用卷积神经网络和对象检测器提取视频的二维特征、三维特征以及对象特征;然后,使用消息传递网络来更新对象特征,添加对象之间的联系信息;接着,利用时空注意力模块将所有特征进行融合得到视频整体特征;最后,利用分层解码器解码整体特征来获得视频的描述.实验结果显示,该系统能够准确生成对视频内容的描述,并且生成的描述更能体现出对象之间的联系.
其他文献
随着压缩感知理论的应用,可以实现将电能质量数据的采样和压缩合二为一,大大降低了采样速率和时间.深入的研究压缩感知在电能质量数据压缩中的应用的基础上,本文将自适应字典学习与压缩感知理论结合,实现了自适应字典学习对电能质量数据稀疏表示的压缩重构方法.该方法采用大量的电能质量数据样本集进行稀疏编码,训练优化自适应字典.此时的电能质量数据样本都与自适应字典相匹配,可以用少量自适应字典中的原子的线性组合来表示电能质量数据样本,实现电能质量数据的快速压缩,最后利用压缩感知理论对电能质量数据重构.通过实验仿真,与传统稀
为了深入探究特殊工况下永磁牵引系统的阻抗特性,改善系统作业稳定性,本文对永磁系统直流侧振荡问题展开探究.本研究方案以电压补偿作为振荡抑制的优化突破口,根据永磁同步电压作业原理,对其采取前馈解耦电压补偿,形成新的振荡抑制方案.实验测试结果显示,本文提出的振荡抑制方案,能够使得电机作业电流趋于平稳,且直流侧未出现振荡,较传统振荡抑制方案应用效果有明显地改善.
近年电气火灾事故频繁发生,引起相关部门高度重视.城市轨道交通车站,属于人员密集、电气火灾易发生的高危场所,通过设置电气火灾监控系统,以提醒运营人员及时排除电气故障、消除电气火灾隐患,防止电气火灾的发生.目前轨道交通低压配电系统以设置剩余式电气火灾监控系统为主,但实际使用过程中,存在较多误报问题.本文以某地城市轨道交通车站为实例,通过对现场线路漏电检查,从剩余式电气火灾监控系统工作原理深入剖析漏电报警原因,并提出相关处置措施.
随着广播体系的发展,国家应急广播技术也在不断优化进步,目前重点加强了广播信息平台建设,来提高广播预警能力,传统广播覆盖网关键技术存在着信息对接异常,预警能力差等问题,基于此设计了新的关键技术,搭建数据发射台,进行应急广播传输流数据解析,通过终端唤醒,实现应急广播信令转换.进行对比实验,结果表明:设计的应急广播中短波覆盖网关键技术接收DTMF控制信令并响应唤醒指令的时间短,证明本文设计的技术信息平台对接顺利,预警能力较好,有一定的应用价值.
针对目前废旧光伏组件回收处理问题日益严重的现状,研究槽式滚筒清洗装置、链式清洗装置、鼓泡清洗装置、真空抽滤清洗装置等不同类型的清洗方式对光伏组件回收硅材料提纯效果的影响,设计对比实验,验证工艺装置对细小颗粒硅材料的提纯效果,确定硅材料提纯最佳清洗方式及参数.
呼吸机被普遍应用于麻醉、临床急救等情况,在医学领域起着重要作用.但其不能及时显示数据,反馈病人当时身体状况,使呼吸监护工作依旧较为落后.为加强对需呼吸支持患者的处理,此设计研究了一种应急呼吸监护系统,用以连续监测病人的呼吸信号.且全面优化了电路的结构,包括性能、显示方式和电源管理,整体上实现了系统的微型化和低功耗.并加强了信号的灵敏度,抗干扰性能.
随着城市化进程的不断推进,商业楼宇成为城市的主要建筑,近年来的发展速度更是迅猛,商业楼宇的电力损耗成为一大问题.在节能领域具有极大商业需求,针对这个问题,本文提出了一种基于CPS(信息物理系统)架构的商业楼宇智能用能控制系统.这个系统是典型的三层架构模式,通过智能终端可以实现照明、空调、通风等系统的控制,基于智能用能网关进行多元测算,实现楼宇的能效分析和节能协调.