基于半监督学习的微博情感分析技术研究

来源 :成都信息工程大学 | 被引量 : 1次 | 上传用户:sxytsxyt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
web2.0技术的普及,使得广大网络用户从传统的被动接收消息转变为主动发布信息,人们比过去更愿意在网络上分享自己的生活和观点。微博以其操作简单、快捷和实时等特点受到大量用户的青睐。在全球,每天都有数以亿计的微博更新,这庞大的数据看似杂乱无章,毫无规律,但其中却蕴含着丰富的信息,对于个人决策和企业产品的改良具有重要意义。因此,基于微博数据的用户情感分析已经成为学术界热门问题之一。目前,基于监督学习算法的文本情感分析取得不错效果,但是这种算法模型需要的标记数据数量较多。在实际应用中,较多数量标记数据的获取需要消耗较多资源,与之相对,未标记数据获取较为简单。因此,针对中文微博情感分析,本文使用半监督学习算法,将标记数据和未标记数据相结合共同构建模型。但是,由于微博噪声多,口语化等特点,传统文本情感分析方法并不完全适用。因此针对微博的特点,本文研究包括数据预处理、特征提取和模型构建等情感分析的关键性问题,主要研究内容如下:(1)对特征提取方法进行改进。使用传统信息增益率(Information Gain Ratio)提取特征并不能很好地代表微博文本,对于微博中常见的表情和颜文字等不能有效的处理。因此,本文提出一种基于特征融合的特征提取改进算法,将传统特征和微博表情颜文字特征采用不同的方法进行筛选,并将两部分保留特征进行合并,形成新的保留特征。实验证明,在最终保留特征维数相同的情况下,改进算法特征选择效果比原算法好。(2)对特征权重方法进行改进。微博表情和颜文字对文本情感判断十分重要。但使用传统TF-IDF(Term Frequency–Inverse Document Frequency)算法计算结果并不能体现这点。因此,本文提出一种基于加权的特征权重改进算法,增大微博表情和颜文字两部分特征权重。实验证明,在其他条件相同情况下,适当增大这两部分特征的权重可以取得较好的分类效果。(3)对半监督学习算法渐进直推式支持向量机算法(Progressive Transductive Support Vector Machine:PTSVM)进行改进。由PTSVM算法原理可知,该算法执行过程中添加的大部分样本并没有对模型构建起作用,甚至有的添加样本使分类超平面向错误方向偏转,不仅大大增加了算法的运行时间,并且在一定程度上降低算法的准确率。针对这一缺点,本文提出一种基于改进k-近邻的PTSVM算法,在输入PTSVM之前先对样本进行一次聚类,将不满足条件的样本进行删除。本文采用三种不同类型的聚类算法和k-近邻算法结合对PTSVM算法进行改进。实验证明,原型聚类k均值(k-means)算法和k-近邻算法结合对PTSVM算法改进效果最好,与原算法相比在运行时间上有大幅减少,同时在算法准确率上也有小幅提升。
其他文献
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
摘要:基于1996-2016年北京研发投入与地区生产总值的统计数据进行协整检验,结果表明北京研发投入与经济增长之间存在长期动态均衡关系,且两个变量具有单向因果关系.最后提出北
目的 改进结肠、直肠、手术留置导尿管病人拔除导尿管的方法,预防尿潴留的发生。方法 将120例结肠、直肠术后病人随机分为试验组60例,对照组60例。实验组拔除导尿管前先行硫酸
目的:建立大鼠颈动脉球囊损伤模型,观察损伤血管的组织形态学变化.方法:应用PTCA球囊导管损伤大鼠颈动脉,用光镜和扫描电镜观察损伤后不同时间颈动脉的组织学变化.结果:扫描
The large deflection dynamic plastic response of fully clamped squareplates with stiffeners under blast load is analyzed in detail in this paper. Variousrelevan
比较蒽酮-硫酸法与苯酚-硫酸法测定凉粉草多糖含量的差异,以期选择较好的方法对凉粉草多糖进行测定。结果表明:苯酚-硫酸法最佳测定条件为苯酚溶液5%、浓硫酸5.0 m L、反应温
随着社会经济的飞速发展,高层建筑不断增加,为了保证高楼的供水需要,二次供水设施也随着高层建筑的发展而增加,从而有效地保证了高层建筑的供水需要,同时也带来了二次供水的
依据中国规范对援赞比亚穆隆古希新国际会议中心项目进行了岩土工程勘察。根据勘察结果,建议会议中心主体建筑采用钻孔灌注桩基础。按照中国规范给出的单位面积侧阻、端阻值,以及按照英国规范由标准贯入击数得到的单位面积侧阻、端阻值,计算了代表性钻孔处的桩基承载力。结果表明,英国规范的端阻大于中国规范,侧阻小于中国规范,总承载力约为中国规范的91.5%。
《国家图书馆藏清代彝文田赋账簿研究》由朱崇先、杨怀珍两位先生编著,由民族出版社于2013年公开出版发行。书中辑录了三种重要的彝文田赋账簿材料,分别为国家图书馆藏、清华大