基于BERT-LDA的新闻短文本分类方法

来源 :信息技术与信息化 | 被引量 : 0次 | 上传用户:firefly_xk
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对短文本字数受限导致的特征稀疏和语义模糊的问题,提出一种基于BERT-LDA的新闻短文本分类方法。首先将词向量和位置向量作为BERT的输入,通过多头自注意力机制获取长距离依赖关系,提取全局语义特征;然后利用Word2vec模型融合LDA主题模型扩展短文本的特征表示方法,解决短文本数据稀疏和主题信息匮乏的问题。实验结果表明,BERT-LDA模型相较于传统和单一的分类模型,具有更好的分类效果,其F值高达92.86%,证明了该方法的可行性和有效性。
其他文献
目的分析妊娠高血压伴肾损害的临床特点及对妊娠结局的影响。方法选取我院收治的产妇127例作为观察对象,其中45例妊娠高血压无肾损害产妇为单纯妊娠高血压组、39例妊娠高血压
通过对病害的症状观察和病原鉴定查明,河南省小麦发生了一种新病害,就是由禾谷孢囊线虫(Heterodera avenae Wollenweber)引起的小麦泡囊线虫病.经人工接种测定,该线虫还可侵
花生主茎叶定型后的功能期,硝酸还原酶活性(NRA)很高,并可随其功能期保持一段时间后而下降.在整个生育期内NRA在苗期出现一次明显的高峰.苗期NRA与品种耐肥性呈负相关.经对大
目的:探讨并分析用氨甲环酸联合欣母沛对接受剖宫产手术后并发宫缩乏力性产后出血的患者进行治疗的效果及对其凝血功能的影响。方法:选择2019年6月至2020年7月期间在江阴市人
对15个苹果品种的叶片过氧化氢酶活性年度间变化和生长期酶活性变化进行了研究.结果表明,不同苹果品种过氧化氢酶活性不同,品种间和年度间均呈现显著差异.酶活性年度变化呈“
随着人民生活水平的提高和社会经济的快速发展,越来越多城市正在面临道路交通拥堵问题,交通拥堵影响着居民的幸福指数并制约了城市的进一步发展。交通速度与交通状态的关系紧
摘 要:在我国城市道路平面交叉口中,右转机动车遵循国际惯例是不使用信号灯控制其行驶行为的。但是当慢行交通量比较大时,右转机动车不可避免的会与慢行交通流产生冲突。在交叉口对右转车加以信号控制是一个较好的解决办法。在信号控制的设计中,交通流的通行能力分析成为关键。该文对城市道路平面交叉口右转机动车在慢行交通干扰下的通行能力的变化进行了深入分析,得出了慢行交通干扰下右转机动车通行能力的量化分析,为右转车
国有林业资产管理与林业经济发展是密不可分的。随着林业资产存量的不断增长,传统的资产管理方式和运营已不能满足当代林业行业发展的需要,职能部门、事业单位管理方式、方法
在电子信息、计算机、以及AI等领域发展下,车辆集群已经受到了众多学者关注。浙江理工大学学者提出了一种分层式的智能小车软件系统框架设计与路径规划方法研究,上海交通大学
我国对于创新初期阶段的风险投资等投入的动力长期不足,在科技投入中的比重很少,主要制约于:一是项目发现机制不足;二是项目评估机制不足;三是项目退出机制不足。创新初期阶