基于三支决策与卷积神经网络的文本分类算法的研究与实现

来源 :宁夏大学 | 被引量 : 0次 | 上传用户:laoka
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代的到来,文本数据呈现了爆炸式增长趋势,为了提高有效信息的获取效率,文本分类技术得到了迅速发展。新闻文本作为人们获取信息的重要形式,如何将新闻准确、快速地分类,从而为用户精准推荐感兴趣、有价值的信息成为了一个热点问题。针对现有对新闻文本分类算法中存在数据特征高维和稀疏性的问题,本文将在文本数据特征选择方面对传统的特征提取方法进行改进,完成文本分类算法的研究工作。本文分析了文本分类的流程,对常用的分类算法作了介绍,结合三支决策理论对传统的特征选择算法进行了改进,并实现了结合注意力机制的卷积神经网络分类算法,主要工作体现在以下方面:(1)本文对现有的文本分类算法进行了研究,通过查阅文献,对文本分类的发展历程有了了解,并对贝叶斯、SVM、CNN、RNN等分类算法的优势与不足进行分析,为下文的改进工作做了基础。(2)首先,本文将表现力指数加入到传统的特征选择算法CHI、TF-IDF中,对区分度较高的特征词的权重进行提高;其次,将改进的两种算法作为三支决策的双评价函数,将特征词分别划分到正区域、负区域和边界域中,并对将边界域中的特征词进行筛选;然后,与正区域合并,确定了最终的特征集合;最后,基于贝叶斯分类器进行了实验,实验表明,该方法可以提高分类准确率。(3)将注意力机制与CNN结合,在输入层后加入注意力层,提升了特征词的质量,在THUnews数据集,通过对模型的比较,实验结果表明A-CNN在分类上有较好的效果,分类准确率高达97%。(4)在实现的A-CNN基础上设计并实现了新闻分类系统。
其他文献
近年来,由于在安保监控和体育指导等领域中的深入应用,人体姿态估计逐渐成为计算机视觉中的热门研究领域,但同时市场需求的飞速增长也给人体姿态估计技术带来了挑战。现有的基于深度学习的方法本质上是利用一个映射函数将2D人体关键点提升到三维空间中去,在面对不均衡的多分布数据集时为了保证整体精度会降低离群样本的权重。具体而言这些离群样本是指大姿态动作,而在自然场景中,大姿态动作普遍存在。这导致大部分现有的方法
随着大数据时代的到来,联机分析处理(Online Analytical Processing,OLAP)已成为了研究的焦点。其中,面向海量数据处理的效率问题成为OLAP研究的关键点。为了提高执行效率,越
近年来随着移动业务的快速发展,移动计算任务需要的计算力越来越强,要求的处理时延越来越小。但是通常移动设备的计算能力较弱且电池容量较小,移动计算任务直接在移动设备上
宇宙高能粒子的起源一直是非常活跃的研究主题。在天体物理源中,低能的背景热电子被各种潜在的加速机制能化到极高能量,导致的高能粒子具有较大的平均自由程而形成非热谱分布
2017年我国电影产业领域的第一部专门性法律——《中华人民共和国电影产业促进法》(下称《电影产业促进法》)颁布实行。在此之前,我国电影产业主要是由法规、规章以及其他各种规范性法律文件来进行规范和调整。《电影管理条例》第1条规定:“为了加强对电影产业的管理,发展和繁荣电影事业,满足人民群众文化生活需要,促进社会主义物质文明和精神文明建设,制定本条例。”由此可以看出,长期以来我国对于电影产业的定位是将
明清以来,传统乡村中的土地买卖之风愈加兴盛,贵州省印江县土地买卖契约文书也反映出这一特点。经多次走访印江乡村,有幸在广东坪村赵家坪组和七百渡村共收集175份土地买卖契约文书,时间上至康熙下至宣统,基本横跨有清一代,其内容包括永卖契、当契、转当契以及以田作抵等四大类。通过分析印江契约的格式与类型,发现其交易过程和书写程式与国家制度基本一致,但也保留了自身的特点。如以买主作为立契人、书写习惯夹杂俗语、
随着科技快速发展、决策环境地不断演变,多样化和复杂化的决策难题急需新的解决手段。决策问题需采用合适的评价信息和准确的决策方法,而多属性决策(MADM)方法能有效的解决这
中美建交四十周年以来,贸易往来愈发密切,但是2018年以来中美贸易摩擦加剧,引发人民币汇率大幅波动,那么站在中方立场上研究中国产品在美国市场上的比较优势及其与人民币实际汇率之间的关系显得很有必要。因此本文基于HS分类标准,通过出口相似性指数FK找出越南是中国在美国市场上竞争最激烈的国家,之后本文通过显示性比较优势指数RCA*和动态显示性比较优势指数DRCA来研究中国产品在美国市场上的比较优势,结果
本论文从约束时效优化Ni51Ti49合金双程形状记忆效应的内在机制出发,系统研究对马氏体相变诱发的双程形状记忆效应有决定性影响的Ni4Ti3析出相在不同约束时效工艺下的生长行
中国经济在经历了30多年平均10%左右的快速增长之后,正逐步迈入以“中高速、优结构、新动力、多挑战”为特征的“新常态”阶段。一方面,我国经济抓住了重要的发展机遇。另一方面,在经过了前一阶段的高速发展后,我国经济出现了一系列问题,如部分行业过度投资而带来了部分产能过剩等。在此形势下,“一带一路”合作倡议浮出水面。意在利用中国的优势富裕产能,加大对沿线国家的直接投资,为沿线国家的基础设施建设和社会经济