基于电子产品领域商品评论的情感分析方法研究和实现

来源 :北京交通大学 | 被引量 : 4次 | 上传用户:zqfhj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在产品评论中,现有的情感分类是根据用户评论时自主设置的星级数来分为好评差评。但是每个用户对于星级的把控不同,造成产品评论情感分类存在较大的误差。产品评论是潜在消费者在进行购买产品时,进行决策的一个重要参考内容。当分类与评论星级不匹配时,常常会引起潜在消费者对产品本身的质疑。除此之外,产品评论是商家制定销售战略,提升产品性能和服务质量不可缺少的信息来源。但是一个产品的评论可能达到上万条,人工去分析将耗费大量的人力物力,因此通过计算机对其进行分析就显得至关重要。本文以从京东商城爬取的12000条手机评论作为电子产品的代表来对产品评论进行情感分类,并针对短文本中关键词提取的准确率较低和Tri-Train算法中初始分类器的差异性不稳定以及隐性置信度筛选引入噪声影响分类器性能的问题,对现有的关键词提取技术和Tri-Train算法进行改进。主要工作如下:(1)电子产品文本评论内容偏向口语化和网络化,新词使用比较频繁。但是结巴分词识别新词的能力有限,使结巴分词的结果不是很准确。针对这一问题,本文在从京东爬取的语料数据上,使用互信息和左右熵,获取新词语,并将这些新词加入结巴词库,再用新的结巴词库进行分词,以提高分词结果的准确性。(2)针对现有关键词提取效果不佳的问题,本文分别对基于TF-IDF提取关键词的方法和基于情感词典提取关键词的方法的优缺点进行分析,提出了利用基于情感词典提取关键词和基于TF-IDF提取关键词相结合的方法进行关键词提取,并利用Word2vec进行文本特征表示的特征选择方案。该方案有效的利用了基于情感词典提取关键词和基于TF-IDF提取关键词的优点,形成了优势互补。为了提高利用情感词典提取关键词的效果,本文利用现有的手机评论文本语料构建手机评论领域的领域词典。经实验证明,该方法较好提高了分类器的准确率和F1值,改善了其分类性能。(3)Tri-Train是一种常用的半监督算法。该算法一定程度上可以利用未标记数据提高分类器的分类性能。但是该方法目前存在两个问题:一是构造的三个分类器的差异性不稳定且不够大。二利用隐式置信度筛选代替显示置信度筛选,会引入噪声数据,一定程度上降低分类器的性能。针对问题一,本文利用三种差异性能较大的算法代替原算法中只使用一种监督算法的方法,分别对有放回采样后的数据进行训练来构造三个分类器,以增大其差异性。针对问题二,本文利用文本相似性对噪声数据进行滤除。经验证,该方法在一定程度上可以提高Tri-Train算法的分类性能。
其他文献
很多投资者都认为金融危机与经济危机是等同的,但是其实两者之间并不等同。本文针对金融危机与经济危机之间的区别进行了一系列的叙述,希望能够让读者理清金融危机与经济危机
<正>检案摘要:据委托送检资料记载,被鉴定人麻某于2013年2月4日10:45分到某镇卫生院就诊,并给予治疗,于下午13:30静点完毕,自行离开,回家后约2h后死亡。现某县卫生和食品药品
会议
目的观察温胆汤治疗失眠痰热内扰证的临床疗效。方法将60例失眠痰热内扰证患者随机分为治疗组和对照组各30例,治疗组予温胆汤加减治疗;对照组予艾司唑仑片治疗,治疗1个月后评
<正>发作性睡病是一种不明原因的慢性睡眠障碍,临床以不可控制的病理性睡眠、猝倒、睡眠瘫痪和睡眠幻觉四大主征为特点。中医学称"多寐",其核心病机是肝郁脾虚、清阳不升、痰
目的:分析运脾和胃汤治疗小儿脾胃不和型厌食症疗效。方法 198例腹泻患儿,随机分为观察组和对照组,各99例。观察组患儿口服运脾和胃汤进行治疗,对照组口服吗丁啉进行治疗。对
近年来大量研究表明,环氧化酶-2(COX-2)的过度表达与肿瘤的发生,特别是消化系统肿瘤的发生、发展密切相关。本文采用免疫组化方法,检测了43例结直肠癌组织和14例正常大肠粘膜
氢能源具有可直接存储,能量密度高,资源丰富和燃烧产物无污染等优势,被认为是21世界最有潜力的新型能源。目前制备氢气的主要方式是通过电解水反应来实现,其过高的过电位使反
<正>2014年李克强总理在政府工作报告中首次提及大数据,2015年提升为"国家大数据战略"。时至2017年,各省市掀起了大数据产业发展浪潮:大数据产业的省市规划,全国已有37个;全
圣人观念在中国传统文化中一直占有重要的地位,道家、儒家、佛家都极为重视圣人问题。因此,十分有必要对传统文化中的圣人观作进一步的梳理,重新发掘圣人传统在今天的现实价
目的:观察精神卫生专科医院失眠症患者的中医证候分布特征,探讨其与焦虑、抑郁的相关性。方法:将267例失眠症患者分为肝郁化火、痰热内扰、阴虚火旺、心脾两虚、心虚胆怯5种
会议