浅析文本信息中情感偏向性的数据挖掘

来源 :中国新通信 | 被引量 : 0次 | 上传用户:imyylam
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  【摘要】本文以文本信息中的情感偏向性数据挖掘作为出发点,对中国用户使用产品的评论文本信息加以分析和讨论,采用Apriori算法解读文本信息的特征挖掘,并结合监督形式的情感分析技术,实现了对使用产品评论信息的情感倾向性数据挖掘,以便于更好地帮助生产服务商改进自我的生产缺陷,提高行业内的竞争力。
  【关键词】情感倾向性数据挖掘文本信息
  伴随着现代化的电子商务迅猛发展,大多数的用户开始选择浏览网络产品评论来了解产品和服务的信息,以便更好的选择出自己最满意的产品类型。同时,用户评论信息也是一种信息的反馈途径,帮助了产品制造商及时的发现产品的缺陷和服务体制的漏洞,提高自身的竞争力。这就必须得依靠有效的数据挖掘手段来提高用户获取信息的全面性和准确性。
  一、研究背景
  Popescu等人把用户评论的文本信息挖掘任务分为以下步骤:(a)挖掘评论中的主要产品属性;(b)挖掘用户评论文本信息中对于产品属性的主要观点;(c)分析用户评论文本信息中的情感倾向;(d)对提取出的有效信息进行重要性排名。本文的研究内容主要涉及的就是以下几个方面。
  1、挖掘产品的特征属性
  由于国外的研究者较早的意识到分析挖掘有效信息对于产品生产商的重要性,所以在英文的信息挖掘方面,他们已经取得了较好的研究领域发展的成果。在2004年时Hu等人就采用应用关联分类的方法对文本信息中进行有效的挖掘。利用这种非监督性的方法对一些产品评论的文本信息进行挖掘研究,平均的调查准确率达到了72%,然后在此基础上再对信息进行后续加工处理,就得到了用户对于产品主要特征的情感倾向性。
  由于网络评论信息数据挖掘的范围较大,并且信息的专业性不强,信息变化快,人工参与监督型的方法不满足于对整体信息的挖掘,这就需要采用非监督型的数据挖掘方式,总体的对文本信息进行分析研究。本文在以上研究的基础上,运用关联规则的非监督型挖掘方式和情感倾向性分析技术来更好地对评论进行挖掘深析。
  2、情感分析
  情感分析也叫做观点挖掘,和本文的研究主题相比较,观点挖掘更偏向于文本中对相关主题内容所表达观点的发现和挖掘。文本信息具有主观性和客观性之分:主观性的文本偏向于对一种观点的表达和认知;二客观性文本偏向于对一种事实的说明和称述。观点挖掘的目的就是将文本中的主观性文本信息识别出来,分析其中含有的观点信息以及她们之间还存在的潜在的联系,将得到的结论应用到实际问题中去。主体在主观性文章中表达对某些或者某一实体的认知,这其中就包含着大量的主观性情感。情感分析的目的就是判断文本信息中体现的情感倾向,可以分为正面、负面和中性三类。
  二、文本信息挖掘方法
  本文在以上研究的基础上,运用关联规则的非监督型挖掘方式和情感倾向性分析技术来更好地对评论进行挖掘深析。具体的分析方法可以分为以下几个步骤:(a)利用中文语言的分析工具对文本信息中的词性进行标注。(b)按照产品的属性分类模型,逐字逐句的分析信息的情感倾向。分类则采用LingPipe自然语言分析工具。对文本信息的情感倾向进行汇总,加入到观点评论的数据库中。(c)对进行词性标注后的文本信息建立关联规则的事务文件。(d)在关联规则的Apriori算法基础上,挖掘出频繁项集作为候选的特征属性集合I0。(e)将抽取的产品特征文本信息属性集I0按照近邻规则进行筛选,筛选后的结果作为候选特征属性集I1。(f)将候选特征属性集I1按照独立支持度的规则进行分析抽取,形成候选特征属性集I2。(g)将I2过滤形成特征属性集合I3;再从中过滤掉单字名词的项目,包括单字名词的n项频繁项(n≤3)。剩余的则成为了最终的产品特征属性集I。(h)在观点数据库中挖掘到关于产品特征属性的语句,分析出句子包含的情感倾向。(i)再按照句子出现的频率性大小进行排列,并总结出正面和负面信息的数量。
  按照这种方法对文本信息进行挖掘,不用建立特征属性的概念模型就可以得出文本信息的特征属性。本文中以获取产品特征分析为例,运用观点挖掘结合情感分析的技术,从大量的用户文本信息中得到了有效的评论信息,使用这种方法进行分析挖掘实验表现出了极大的优越性,为生产制造商和客户提供了经济实用的决策手段。
  参考文献
  [1]唐明.文本挖掘及其在多文化交流平台中的应用[D].西南大学,2006
  [2]黄立冬.基础教育资源搜索引擎中的中文分词技术研究[D].南京师范大学,2006
其他文献
期刊
3GPP LTE主要指的是3G的一种演进型式,其是3G与4G技术两者间的一个过度,具体点讲就是3.9G的全球标准,使得3G的空中接入技术水平得到进一步增强,将OFDM和MIMO当做自身无线网络
朱自清在《春》一文中写道:"雨是最寻常的,一下就是三两天,像牛毛,像细丝……"。也许"最寻常",历代诗人咏雨的名篇佳句不为人所注意,但是,稍为留心一下,咏雨的名篇佳句也是很
期刊
今年以来,宁津县坚持以科学发展观为主题,以转方式调结构为主线,围绕打造“三城一基地”(中国五金机械产业城、中华美味小吃城、水郡绿城,中国最大的小麦良种产业化基地)这一目
对当前高校图书馆学科馆员制度发展状况、构建与学科建设相适应的文献资源保障体系中存在的问题进行分析和探讨,提出了加强学科馆员技能培训,通过发挥学科馆员的作用来构建科
全业务运营时代,电信运营商竞争更加激烈,运营商运维工作在降低CAPEX和OPEX的压力下,质量、效益和成本之间产生了严重的矛盾。本文借鉴价值工程理论,提出了一种科学的管理方法,以
2002年江苏省盐城市中考语文试题阅读《剪不断的乡愁》一文,完成文后1-9题。去年年底,“开放大陆探亲”的消息公布了。这消息像一股温泉,乍然间从我心灵深处涌现,然后窜升到
期刊
毛泽东的古典格律诗词,具有一种特具的美学风范,如画的意境美,精辟典雅的语言美,声韵和诣的音乐美,蕴藉风流的神韵美。其中最突出的最鲜明的美学特征则是崇高美。它磅礴的气
期刊
少儿图书馆是为少年儿童提供知识、增长见识、陶冶情操的文化资源公共场所。以构建少儿图书馆全覆盖服务策略模型为起点,以创新服务功能、发展社会合作、提升馆员素质为落脚点
古往今来,有多少妙龄女郎渴望着金钱与情感的完美和谐结合!但常常不尽如人意,只能在两难选择中惆怅,这反映在古代诗词里不乏许多佳篇。清代康熙皇帝下诏让一批文人编纂的《全
期刊