基于BERT-BiGRU模型的文本情感分析研究 ——以酒店顾客评论为例

来源 :山西大学 | 被引量 : 0次 | 上传用户:shaokangtian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网的普及和应用,各种线上服务类软件使人们的生活变得愈来愈便捷与快速。人们可以通过各种APP对衣、食、住、行提前做好计划与安排。通过社交互动、用户生成内容等手段来辅助商品购买和销售的社交商务也成为一种重要的商业模式。一些线上服务类软件利用顾客购买的商品评论及互动作为引导潜在顾客的重要手段。通过对顾客评论内容进行情感分析,既可以帮助服务类软件平台充分了解顾客需求,又可以帮助顾客快速地找到适合自己的服务产品。情感分析是自然语言处理领域的热门主题,主流的研究方法主要依托词向量模型对评论内容进行结构化转化,并基于深度学习的神经网络模型对文本进行情感分类。本文选择携程网中的酒店顾客评论文本,通过爬虫技术对近9万条酒店顾客评论内容进行数据采集,经过数据清洗、去停用词、文本分词和情感词性标记等得到实验数据集。本文首先介绍了双向门控循环单元模型(BiGRU模型),BiGRU模型具有较强的学习能力与泛化能力,该模型充分利用了输入序列的上下文语境信息进行分类结果输出,更加适用于文本类型的数据集;其次介绍了BERT模型,BERT模型作为一个预训练语言模型仅需根据自然语言中的下游任务进行微调。本文对应的自然语言下游任务为情感分析,选择BERT模型中适用于中文的chinese_roberta_wwm_large模型将酒店顾客评论内容逐字转化为计算机可以理解的向量形式。本文在构建BERT模型和BERT-BiGRU模型的基础上进行了两项情感分析实验,在实验过程中多次调整参数取值对比得到分类准确率较高的模型。在两项实验中BERT层均为词向量层,将输入的文本序列进行向量化转化;在实验的输出层中均加入softmax激活函数对向量进行分类。通过多次实验得出结论,BERT模型经过最佳参数选择后精确率可达91.36%,BERT-BiGRU经过最佳参数选择后精确率可达91.41%,两个模型分类效果俱佳,且后者更优。
其他文献
随着新课程改革的不断深入,对于学前幼儿教育的要求也越来越高,不仅需要幼儿具备优秀的知识和学习技巧基础,还需要幼儿具备全面的素养。因此,本文基于这一现状,以学前教育幼儿舞蹈教育为例,结合当前应用广泛的游戏教学模式,从而为学前教育幼儿舞蹈教学提供一定的参考。当前,在进行学前教育幼儿舞蹈教学的过程中,一直还停留在舞蹈基本功的教学中,对于舞蹈理论知识和幼儿心理分析的重视并不够,导致幼儿舞蹈素质和功底
期刊
为解决高原软岩隧道穿越富水地层关键难题,利用超前地质预报(TSP)等方法开展水害动态控制关键技术研究。首先,提出地下水高精度综合定量识别方法;然后,提出涌水量估算技术和涌水量动态监测的反坡排水及其优化技术,并结合敦格铁路长草沟隧道进行实例验证。研究结果表明:基于地震波、激发极化、地质雷达、瞬变电磁法的地下水高精度综合定量识别和涌水量估算技术,以及涌水量动态监测的反坡排水及其优化技术,可实现隧道施工
市政工程装配化是建筑工业化的重要组成部分,跟随国家建筑工业化的脚步,市政工程装配化产业的发展也取得了明显的进步,但是在市政工程装配化产业发展过程中也遇到了一些现实的问题,影响市政工程装配化的发展速度。首先介绍了装配式市政工程的发展前景及现状,然后重点介绍了装配式市政工程在发展过程中遇到的现实问题,最后着重提出相应的解决思路,为行业相关人员提供参考,促进国家市政工程装配化产业的发展。
致密轻质油藏注CO2会引发沥青质沉积现象。为厘清不同CO2注入方式下沥青质沉积特征及其对储层的伤害机理,以鄂尔多斯盆地延长组7段储层轻质原油为例,在明确CO2注入量和压力对沥青质沉淀量影响的基础上,通过开展不同注入压力下CO2吞吐和驱替实验,辅以核磁共振在线扫描技术,研究了不同注气方式下沥青质在岩心中的沉积特征,定量评价了不同注气方式下沥青质沉积对储层物性、润湿性和孔隙结构的伤害程度,从微观孔隙尺
数学是兼具科学性和人文性的学科。由于受传统教学观的影响,教师对数学教学的认识还停留在最初的知识传授层面,缺乏对其人文价值的挖掘,使数学改变了原有的面貌。随着新课程改革的持续推进,社会各界格外关注数学文化,尤其是数学教育界更是奋力投身到对数学文化的研究之中。无论是对一线数学教师还是数学理论研究者来说,数学文化与数学教学的融合都不啻是一种挑战。近年来,尽管有越来越多的数学教育研究者开始研究数学文化,但
我国常规跨径桥梁多采用预制预应力钢筋混凝土箱梁,该类型的桥梁在施工和运营中暴露出混凝土开裂、保护层脱落、钢筋锈蚀等质量通病。论文结合这些质量通病和工程实践经验,提出了预防预制预应力混凝土箱梁质量通病出现的措施和绿色施工技术,对减少施工质量病害和提高箱梁的安全性和耐久性具有借鉴意义。
在现代社会中,教育的危机已经不局限于一国之内,而是成为世界性的危机。汉娜·阿伦特认为导致美国教育危机的原因有三,一是美国特殊的政治环境所导致的平等的异化;二是教师权威的失落和儿童世界的封闭;三是教和学关系的割裂。阿伦特有关教学价值观念的思想正是在这一基础上得以渐渐明晰的,面对当时教育危机下进步教育运动盛行的状况,阿伦特不仅深刻剖析和批判了进步教育运动中不切实际和有损儿童身心发展的教育理念和观点,还
针对富水风化花岗岩隧道突水突泥灾害频发、危害严重的难题,以广西均昌隧道突水突泥灾害防治为例,通过分析隧道历次突水突泥灾害特征,提出富水风化花岗岩隧道突水突泥灾害防治总体原则,综合室内试验与现场试验,建立了以浆液复合、注浆工艺复合、注浆压力动态调控为核心的动态信息化帷幕注浆技术,并形成了以检查孔观察法、检查孔取芯法、涌水量分析法及检查孔P-Q-t曲线法对帷幕注浆效果进行综合评价的方法,成功解决均昌隧
随着我国三级课程管理体制和基础教育课程改革的推进,为地方和学校的校本课程开发和自主管理提供了一定的发展空间。K小学英语校本课程于2017年9月通过采用校内外英语教师共同合作开发的方式进行,旨在提高低年级学生对英语学习的兴趣从而为之后的学习打好基础。在校本课程实施初期受到了广大师生、学校领导和家长的一致好评,并且在促进学生们的英语学习,提高教师们的课程开发能力以及推动学校的自主管理和发展教育特色等方
目的:高胆固醇血症是动脉粥样硬化的最主要危险因素;已经存在相关研究表明有氧运动具有加速胆固醇代谢的功能;而mi RNA也与高胆固醇血症的治疗密切联系,在本实验室前期有氧运动改善高胆固醇血症的预实验中发现mir-29a存在显著差异性变化,而LDLR作为高胆固醇血症的主要治疗标记物,本实验将设计验证有氧运动调控mir-29a如何影响LDLR水平表达。方法:实验室自由喂养一周结束后,将36只八周龄雄性C