基于深度学习和主题驱动的文本分类研究

来源 :贵州大学 | 被引量 : 0次 | 上传用户:chongyou2025
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文本分类是自然语言处理中文本数据挖掘和知识获取的关键技术。随着互联网的快速发展,文本数据呈现爆炸式增长,主题数量剧增,文本分类变得困难。如何根据主题驱动高效管理海量的文本数据,将杂乱无章的文本数据划分到明确的主题中,进行有序管理,成为目前迫切需要解决的问题。主题驱动是指根据主题明确的文本数据为待分类的文本数据确定主题。随深度学习在图像处理、语音识别和计算机视觉等领域特征捕捉方面取得的优异成绩,本研究把深度学习技术应用到新闻文本分类任务中,以CNN,LSTM为基础展开文本分类研究,主要完成以下工作:1.针对传统词袋法的文本表示特征维数稀疏,无法表征上下文信息等问题,使用Word2Vec中的Skip-gram模型将文档中的每个词映射到固定维数的实值向量,有效避免传统词袋法无法表征上下文信息等问题。实验表明,词向量维度为300时,分类的准确率最佳。2.针对深度学习在新闻文本分类中特征提取不充分的问题,本文在CNN,Bi LSTM的基础上进行改进,融合CNN,Bi LSTM的优点,得到Bi LSTM-CNN模型,并将其应用到新闻文本分类任务中。实验表明,Bi LSTM-CNN模型的分类准确率优于单一的CNN或Bi LSTM。3.针对Bi LSTM-CNN模型在新闻文本分类任务中准确率低的问题,本文利用Bi LSTM-CNN模型提取特征,使用XGBoost对提取的特征进行分类,将弱分类问题转换成强分类问题,并将实验结果与Naive Bayes、SVM、KNN进行对比分析。实验表明,融合XGBoost的分类模型优于Naive Bayes、SVM、KNN。
其他文献
脑机接口(Brain Computer Interface,BCI)是一种不依赖大脑外周神经与肌肉组织的正常输出通路而能够实现大脑和外界进行信息交互的通信控制系统。近年来,BCI在各个领域的应用逐渐增加,随之而来的是对BCI系统的准确性和稳定性的更高要求。本文在充分了解国内外研究现状的基础上,系统研究了基于脑电(Electroencephalogram,EEG)信号的左右手运动想象BCI从离线分析
移动群智感知是以人为中心的感知,主要是利用人或车携带着大量移动传感器的特点在目标区域内收集感知对象的信息,上传到中心,以便监测目标区域的情况,完成大规模的、复杂的社
航空拍摄是获取极地信息的重要方式,但获得的航拍光学图像不能直观反应地形特征。在计算机视觉领域,利用光学图像进行多视图重建是当前研究的热点。这一技术可将二维的平面图像信息转化为直观的三维立体信息,已在远程医疗、虚拟现实等方面得到广泛应用,这也给利用航拍图像实现海冰场景地形的三维重建带来了可能。本文对海冰场景三维重建流程及相关改进策略进行了研究。在分析海冰图像数据特异性的基础上,结合运动恢复结构与多视
我国高等教育学术评价近年来逐步打破“唯论文、唯职称、唯奖项”的传统评价体系并提出建立新型的学术评价体系,与此同时建立起分类分层的新型、高效的高等教育人才评价体系。除“破四唯”外,高等教育人才评价应回归注重教师科研成果质量、科研成果贡献、教学质量等方面,并且围绕这些方面对人才进行学科分类为基础的人才评价。本次研究以广西壮族自治区南宁市几所在人文及社会科学领域教学及研究较有特色的地方高校为例,深入调查
地理教师评价学生的地理学习表现是重要的教学任务之一,教师评价贯穿教学过程的每一个环节,因此,地理教师是否拥有评价理论基础知识和评价技能对高中地理教师专业发展和学生全面发展起着至关重要的作用。本文研究的主要内容是调查昆明市高中地理教师评价素养的现状及不同背景下影响教师评价素养的因素,结合现状、影响因素以及半结构式访谈的结果,分析并归纳云南省昆明市高中地理教师评价素养呈现出的问题,提出有效应对高中地理
学位
随着移动互联网和物联网技术的迅猛发展,无线数据流量与日俱增。高质量、高速率的数据传输需求不仅需要更先进的无线传输技术,也依赖于更多的频谱资源。无线电频谱的低频段资源已经趋于饱和,移动通信系统向毫米波频段拓展频谱资源已经成为发展趋势。60GHz毫米波有其独特的优势:频谱资源丰富、传输速率高、方向性强,抗干扰性能强,所以60GHz毫米波通信系统的研究受到了广泛关注。本文将在现有通信标准的基础之上开展下
在这个信息爆炸的时代,随着用户数据和存储设备需求的大幅增加,磁盘阵列中多块磁盘同时失效的情况频繁发生。其中,三盘容错阵列的高可靠性和低成本使它们受到更多的关注。在
从预约合同逐渐成为各国立法的一部分可以看出,其锁定交易机会、提高资源配置效率等优势将会对市场交易带来更多积极意义。因此预约合同的规范化适用在当前世界经济发展的情
遵循《中共中央关于科学技术体制改革的决定》中所提出的“经济建设必须依靠科学技术、科学技术工作必须面向经济建设的战略方针”,我国一直在不遗余力地推行产学研合作。产学研合作有利于调动企业、高等学校和科研院所的积极性,构筑从实验室研究到小试中试量产的技术成果产业化全链条,发挥科技对产业的支撑与引导作用,解决科技与经济发展两张皮的痼疾。对于像T市这样的省会城市,应如何全面、恰当地履行政府职能,进一步推进T
~~
会议