基于视觉属性检测的图像情感分类的研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:ebugdoor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当今,随着互联网技术的发展以及社交网络平台的兴起,海量的用户每时每刻都在社交媒体上通过文字、图片等多媒体内容来表达自己的态度和观点,这使得互联网成为丰富的情感资源库,而图像情感分析也开始受到关注。作为用户行为分析的一个重要研究方向,现有的图像情感分类工作大部分都是从图片的整体来挖掘所蕴含的情感信息,这些工作的重点都集中在如何搭建一个高性能的神经网络,而针对图片的局部区域在情感分类中所起作用的研究却很少。另外,图像情感分析还需要解决低层次的视觉特征与高层次的情感语义之间所存在的语义鸿沟。本文提出了一种基于视觉语义联合嵌入和注意力机制的情感分类模型。首先,为了解决图像特征与情感语义之间的语义鸿沟问题,设计一个基于自编码器的视觉语义联合嵌入模块,训练中间的隐藏层重构图像特征并引入图片的属性特征来监督隐藏层的回归计算,得到图像特征与语义特征的紧凑表达--视觉语义联合嵌入特征;然后,为了突出局部区域的作用,设计一个基于注意力机制的情感分类模块,通过显著区域检测网络提取一组显著区域的图像特征,利用注意力机制来建立显著区域特征与视觉语义联合嵌入特征之间的关联,计算注意力分数并对这些显著区域特征进行注意力加权;最后基于加权后的图像特征构建情感分类器,实现图像的情感分类。本算法将自编码器、注意力机制和显著区域检测技术有效地结合在一个通用模型当中,关注了图像中的局部显著区域,利用自编码器学习图像特征与属性语义特征的潜在特征,在一定程度上填补了图像特征与情感语义之间的鸿沟。本文在VRD基准数据集上,设置了三组对比实验,验证了各个关键模块在本文算法中所起的作用;通过与现有最好的五种方法进行对比,本文方法的分类准确度超过了现有方法在VRD数据集上的准确度,这验证了本文算法相对于现有情感分类算法的优越性。
其他文献
翻译的难度有目共睹。众所周知,英汉两种语言因所属不同的语系相差极大,例如形合和意合。在一元论中眼中,英汉两种翻译是不值得信赖的,然而,不可否认的是中英两种语言之间的
目的:观察茯神丸对早期2型糖尿病肾脏疾病(气阴两虚型)患者的血清肌酐、CRP、尿微量白蛋白肌酐比、糖化血红蛋白、空腹血糖、胱抑素C、中医证候评分的影响,评估其临床应用的安全性。方法:随机选取符合早期2型糖尿病肾脏疾病诊断且中医证候属气阴两虚型的患者共60例,将其按照spss24.0随机数法分为对照组、试验组,两组各30人,所有患者均与基础治疗包括饮食、运动及西药降糖、纠正机体内环境紊乱等治疗,试验
目的:为了研究血小板源性生长因子(PDGF-B)调控通路在前列腺癌形成过程中是否有重要作用,PDGF-B能否促进癌症生长及其具体机制,抗PDGF治疗是否可以作为新的治疗靶点,为将来抗
我国地下工程发展迅速,随着公路、铁路、地铁、水利等主要工程中隧道总数和总长度的快速增长,在岩溶地区修建隧道遇到极大的挑战。岩溶地区隧道开挖的最大危害是爆破对隧道及溶洞围岩的破坏,导致邻近溶洞与隧道之间的裂隙贯通,降低了围岩的承载力,破坏了原应力场,使隧道的变形破坏严重。山区隧道开挖常采用爆破开挖,围岩的扰动和溶洞的存在会加剧隧道的突水突泥现象,潜在的安全隐患严重威胁着岩溶地区隧道施工人员的生命安全
超级电容器因其功率密度高、充放电速度快、寿命长、使用安全等优点被认为是最有前景的储能器件之一。然而,超级电容器的能量密度相对二次电池低一个数量级,这一缺点限制了其
目的:本研究探讨化痰祛瘀法对喉癌裸鼠组织中程序性死亡蛋白配体1(PD-L1),白细胞介素-6(IL-6),Janus蛋白酪氨酸激酶1(JAK1),信号转导和转录活化因子3(STAT3)的影响。方法:1.60只裸小鼠随机分为痰凝血瘀证模型组(50只)和空白组(10只),采用高脂饲料喂养+冰水游泳+盐酸肾上腺素皮下注射的方法建立痰凝血瘀证,证候造模期间观察裸小鼠的一般情况、饮食量、饮水量以及体重,2周
湿法石灰石-石膏烟气脱硫工艺以石灰石为脱硫原料,以石膏为脱硫产物。这样在达到脱硫的目的同时还能将石膏再利用为企业带来额外价值。湿法石灰石-石膏烟气脱硫方法相比于其他脱硫工艺来说有着技术成熟、脱硫效果显著和再利用率高的特点,是目前工业中主要使用的脱硫工艺。湿法烟气脱硫是一个多变量、耦合性强、非线性的复杂过程。脱硫效率是衡量脱硫工艺的关键,而脱硫效率影响因素众多并且有些因素之间相互制约。协调每个因素之
对于大跨度悬索桥的成桥阶段研究相对比较完善,但对其分各个施工阶段而进行静风响应分析以及虑静风非线性效应的颤振分析较少;大部分频域颤振研究都基于8个颤振导数进行,考虑18个颤振导数的情况较少。随着悬索桥跨度的不断增大,静风效应所引起的动力特性改变及附加攻角问题会越来越突出,侧向自由度会参与到颤振中。因此,本文以三维颤振频域分析理论为基础,考虑18个颤振导数及静风非线性的影响,对大跨度悬索桥的成桥阶段
目的:本研究目的在于分析两种方式干预下,嗓音疾病患者的临床变化,探讨嗓音训练结合中医手段对职业用声者嗓音疾病的疗效,并运用主客观参数评价其嗓音。为今后推广嗓音训练在嗓音疾病中的应用提供一定的基础,为更多被嗓音困扰的患者带来福音。方法:本研究采取非随机、对照方法将入组患者58例分成两组,对照组干预措施为喉部按摩+金嗓散结丸,试验组是在前者基础上,对患者进行嗓音训练;治疗前进行喉动态镜或间接喉镜检查、
自动倾斜器是直升机改变旋翼倾斜方向和桨叶倾角的专用装置,通过它可实现对直升机飞行状态的操纵,达到控制直升机飞行方向的目的,是直升机飞行操纵系统的关键元件之一。自动倾斜器轴承又是直升机自动倾斜器的关键旋转、传动件。作为航空飞行器的核心关键件,高可靠性、长寿命、轻量化是直升机自动倾斜器轴承的发展方向。但在国内自动倾斜器轴承设计分析和试验验证方面开展的研究较少,使得所研制的轴承使用性能及寿命难以完全满足