基于增强特征和注意力机制的视频表情识别

来源 :计算机技术与发展 | 被引量 : 0次 | 上传用户:z325z0
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
端到端的CNN-LSTM模型利用卷积神经网络(Convolutional Neural Network, CNN)提取图像的空间特征,利用长短期记忆网络LSTM提取视频帧间的时间特征,在视频表情识别中得到了广泛的应用。但在学习视频帧的分层表示时,CNN-LSTM模型复杂度较高,且易发生过拟合。针对这些问题,提出一个高效、低复杂度的视频表情识别模型ECNN-SA (Enhanced Convolutional Neural Network with Self-Attention)。首先,将视频分成若干视频段,采用带增强特征分支的卷积神经网络和全局平均池化层提取视频段中每帧图像的特征向量。其次,利用自注意力(Self-Attention)机制获得特征向量间的相关性,根据相关性构建权值向量,主要关注视频段中的表情变化关键帧,引导分类器给出更准确的分类结果。最终,该模型在CK+和AFEW数据集上的实验结果表明,自注意力模块使得模型主要关注时间序列中表情变化的关键帧,相比于单层和多层的LSTM网络,ECNN-SA模型能更有效地对视频序列的情感信息进行分类识别。
其他文献
牦牛(Bos grunniens)能适应青藏高原低温、缺氧和强辐射的恶劣环境,牦牛养殖及加工是青藏高原牧区牧民的重要经济来源。目前对牦牛肉品质的研究不够系统和深入,优质部位肉的价值也未得到体现。因此,为系统了解不同部位牦牛肉的品质特性及差异机制,本研究选取外脊肉(WJR)、黄瓜条肉(HGT)和肩肉(JR)共3个部位的牦牛肉分析品质特征差异;对差异表达基因、蛋白进行生物学信息分析和PPI蛋白相互作用
<正>苏轼为词的发展做出了历史性贡献,他的词突破了晚唐五代以来词的创作传统和风格特征,成就了"以诗入词"手法。苏轼的"以诗为词"是指在题材、创作方法、技巧以及表现功能等方面不断向诗歌靠拢,打破了词为"小道""艳科"的观念,提高了词的社会地位,改革了板滞的创词模式,为宋代文坛注入活力,也为后人的创作开辟了新的道路。本文将针对苏轼"以诗为词"的表现,从以下三方面进行论述:一、题材丰富(一)爱国情怀
期刊
该文通过文献资料法、数理统计法、比较分析法等方法对宁夏大学2020-2021学年第一学期学生阳光长跑数据进行了整理和分析,旨在通过研究学生阳光长跑的贯彻执行情况探究宁夏大学校园阳光长跑开展过程中存在的不足,力图从结果反馈问题,针对现象提出建议,为更好的推进校园阳光长跑工作、优化学生体质健康提供参考依据。
采用人造沸石处理高速公路服务区高含氮污水,从温度、投加量、pH和不同搅动方式等角度考察对污水中NH3-N的去除影响,同时结合人造沸石重复使用性能以探讨其工程运用的潜能。结果表明:静置条件下,20 g/L人造沸石分别于4 ℃和25 ℃两种温度下在24 h内对污水中NH3-N的去除率分别达41.28%和48.34%(相差7.06%),呈现出温度对NH3-N去除无明显影响;不同搅动方式对除氮效果的影响表
通过阐释苏轼“自是一家”与李清照“别是一家”词论的内容,认为苏轼词论强调词的个性化,以诗为词,是对“花间词”审美特征的解构;李清照词论强化诗词界限,对词作在音律、语言等方面提出了新的规定,是对词体审美特征的重构。论述了“自是一家”“别是一家”的词史意义:二者都是推尊词体的手段,反映了北宋词坛的“尊体”意识;二者是词学观点碰撞的产物,标志着北宋词学批评的繁荣。
天门市大力扶持小龙虾产业,推广“虾稻共作”养殖模式,推进农业产业化,促进农业增效、农民增收,努力实现乡村振兴和共同富裕。采用SWOT分析方法分别就天门市小龙虾产业发展的内部优势、劣势、机遇、外部机会和外部威胁进行详细分析,提出天门市小龙虾产业发展的建议,旨在为天门市小龙虾产业可持续发展提供参考。
古代家训是中国传统文化的重要组成部分,自北齐颜之推《颜氏家训》问世以来,历代编撰流传不辍,并逐渐成为古代家庭教育的重要载体和主要形式。特别是科举制产生以后,家训的内容深受读书做官思想的影响,每部家训无不对读书应举都有所强调,希望子弟走上仕进之路。但古代家训的大部分内容还是训诫子孙“读书志在圣贤,非徒科第”,把做人放在了第一位,正所谓“父母之爱子,第一望其康宁,第二冀其成名,第三愿其保家”,这是我们
智能化、信息化、数字化成为当今世界发展的趋势,是推动经济社会转型的重要力量。伴随着人脸识别、云端存储等信息技术不断成熟,技术水平不断提高,实现企业智能安全管理成为企业信息化建设的重要内容。“智能安防”建设将给企业生产带来新的安全保障,为企业可持续发展提供重要支撑。