【摘 要】
:
提出了一种基于Pre-LN Transformer的静态多模态情感分类模型.该模型首先利用Pre-LN Transformer结构中的编码器提取评论文本中的语义特征,其中编码器的多头自注意力机制允许模型在不同的子空间内学到相关情感信息.然后根据ResNet提取评论的图像特征,在特征水平融合的基础上通过视觉方面注意力机制来指导文本的情感分类,实现在线评论的静态多模态情感分析.最后在Yelp数据集上执行情感分类的实验结果表明:所提出的模型在准确率上相比于BiGRU-mVGG、Trans-mVGG模型分别提高了
【机 构】
:
大连理工大学软件学院,辽宁大连116620;大连理工大学辽宁省泛在网络与服务软件重点实验室,辽宁大连116620
论文部分内容阅读
提出了一种基于Pre-LN Transformer的静态多模态情感分类模型.该模型首先利用Pre-LN Transformer结构中的编码器提取评论文本中的语义特征,其中编码器的多头自注意力机制允许模型在不同的子空间内学到相关情感信息.然后根据ResNet提取评论的图像特征,在特征水平融合的基础上通过视觉方面注意力机制来指导文本的情感分类,实现在线评论的静态多模态情感分析.最后在Yelp数据集上执行情感分类的实验结果表明:所提出的模型在准确率上相比于BiGRU-mVGG、Trans-mVGG模型分别提高了1.34%、1.10%,验证了该方法的有效性和可行性.
其他文献
潮间带湿地是滨海湿地的重要组成部分,具有维持生物多样性、促进碳汇等重要生态功能.及时、准确地掌握潮间带湿地现状是实现潮间带湿地可持续管理目标的基础.先前的潮间带湿地分类研究依赖于训练样本、人工设定阈值或后处理等,本研究基于GEE (Google Earth Engine)平台开发一种自动、快速、高精度的潮间带湿地分类方法.该方法首先构建高质量密集时序Sentinel-2影像堆栈;然后,分析不同潮间带湿地的遥感特征,基于最大光谱指数合成算法(MSIC)和大津算法(Otsu)建立多层自动决策树分类模型.应用该
传统水体提取算法大多基于某一时期单景遥感影像,无法表现出水体随着时间和空间高度可变的特性,虽然国内外已出现部分时序水体数据产品,但其空间分辨率及水体边界的精度仍无法满足一些研究和应用的需要.本文以地表环境复杂的长江流域为研究区,基于GEE (Google Earth Engine)云平台,使用Sentinel-2 MSI年内长时序影像集结合像元的“时间特征”,提出一种在大尺度环境下更具普适性、可操作性且效果更好的高精度水体提取算法,即基于时序影像数据结合多指数和“时间特征”并融合DEM的算法.该算法选择自
刘震云的长篇小说《吃瓜时代的儿女们》具有广阔而独特的叙事空间,既有“乡土”“都市”的现实社会空间,也有符号代码构成的虚拟网络空间.叙事空间范围扩大,使互不相干的人发生联系、交往,但依然不能消弭现代人孤独的生存困境.小说在现实与网络、真实与虚幻间达到一种反讽、荒诞和间离的叙事效果,构成小说前言多于正文的独特文本结构.前言部分书写鲜活的个人生活史,在附录中呈现被网络语言挤压的干瘪空洞的符号,体现出刘震云对个人生活史沉入当代历史的深入思考.
针对基于深度学习的分类模型在训练样本较少时所遭受的潜在过拟合问题,提出一种具备过拟合抑制的生成式对抗网络分类算法,并应用于高光谱图像分类.该算法在每次迭代时,首先,依据训练样本的标签信息使判别器网络拟合训练样本的数据分布;然后对训练样本的高维特征进行均值最小化,该过程会重新更新判别器网络参数,减小参数的值和方差,以抑制过拟合;最后,将本算法应用于针对高光谱图像所设计的光谱空间分类模型进行分类.实验结果表明,在标准数据集Indian Pines和Pavia University中随机选取1%标记样本进行训练
太阳耀斑大多数发生在磁极复杂的黑子群上空,因此,黑子群磁类型可以作为预测太阳耀斑的重要依据.针对同时具有白光图和磁图数据的太阳黑子分类,提出了一种双流卷积神经网络(Convolutional Neural Network,CNN)的黑子群磁类型分类方法.该方法通过两个网络分支同时提取白光图和磁图特征,在全连接层对两类特征进行融合,最后用于训练和分类.实验结果表明,该方法能较好地避免单通道网络模型的信息损失以及使用双通道图像合成出现的白光图和磁图的相互影响,加权F 1分数可达84.87%,平均准确率可达84
潮间带湿地具有重要的生态和经济价值,但受到全球变化影响,发生大面积退化甚至丧失.掌握潮间带湿地的时空分布特征,对海岸带资源的科学管理具有重要意义.由于受到多云多雨天气和潮汐动态淹没的影响,单时相遥感数据难以获取完整的潮间带湿地信息.因此,本研究开发了一种基于时序遥感指数的潮间带湿地分类算法,并以福建省亚热带海岸带为例,基于Google Earth Engine (GEE)云平台,利用2017年-2019年Landsat 8时序影像数据,提取潮间带光滩、高潮滩植被和低潮滩植被3种典型湿地类型,分类结果总体精
毫秒脉冲星对引力波探测、太空导航等具有重要意义.通过引证ATNF(Australia Telescope National Facility)数据库,指出双星系统与毫秒脉冲星存在密切关系.分析了500 m口径球面射电望远镜(Five-hundred-meter Aperture Spherical radio Telescope,FAST)早期科学数据中心脉冲双星搜索能力的现状,目前Ransom版本的加速度搜索算法虽在中央处理器上进行了高度优化,但在庞大的数据量下,仍十分耗费算力.首先概述脉冲双星及轨道运
将相互逼近(Mutual Approximation)技术从天然卫星的天体位置测量拓展到小行星和邻近盖亚(Gaia)星表参考星的相对位置测量,希望获得更高的小行星位置测量精度.使用中国科学院云南天文台1 m光学望远镜在2020年11月11~12日对小行星702(Alauda)进行了观测试验.在观测资料中,目标小行星共有5次相互逼近事件.参考Gaia DR2(Data Release 2)星表,归算结果显示,在准确度方面,相互逼近技术与经典天体测量(四常数模型)具有良好的一致性;在测量精度方面,相互逼近技术
针对用于太阳磁场精确测量的中红外观测系统(Accurate Infrared Magnetic field Measurements of the Sun,AIMS)望远镜8~10μm真空制冷成像终端系统的高精度装调需求,提出了一种基于中红外可调谐激光光源的宽谱段干涉检测和装调方法.首先,采用泰曼-格林干涉仪,利用参考臂可调的优势,弥补光源相干性不足的缺陷,从而实现8~10μm宽谱段的干涉测量.其次,完成了干涉仪光学系统设计,可同时兼顾8~10μm和可见光双波段的波前质量,解决了肉眼不可见给干涉仪自身装调
2015年9月28日月基光学望远镜(Lunar-based Ultraviolet Telescope,LUT)在任务期间经历了唯一一次完整的月全食过程,为研究地球对太阳光的几何遮挡是否会对月面辐射环境产生影响提供了难得机遇.首先,利用月食期间连续长达2 h 27 min的电荷耦合器件(Charge-Coupled Device,CCD)天文观测图像,统计分析了月食期间的宇宙线事件计数,发现月食期间宇宙线计数不存在明显变化,在30 s曝光时间内,宇宙线事件平均计数为129.27(±15.78);其次,分析