基于深度学习的医疗文本分类模型

来源 :电子设计工程 | 被引量 : 0次 | 上传用户:JC1220
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对静态词向量模型语义表示质量不高,深度学习模型无法聚焦关键特征等问题,提出了基于ChineseBERT-BiSRU-AT的医疗文本分类模型。预训练模型ChineseBERT融入字形和拼音特征,通过参考词的具体上下文语境,学习到词的动态语义表示。BiSRU模块提取文本高维序列特征,软注意力机制赋予关键词更高权重。在影像报告文本数据集进行实验,结果表明Chinese-BiSRU-AT模型取得了最高的F1分数,BiSRU模块训练效率更优,ChineseBERT模型应用效果更佳。
其他文献
本文对《故乡》中“路”的典故、“闰土”的名与实进行了考释,并讨论了逃离“故乡”的意义、“故乡”主题的叙事传统,而旁及其他篇章如《阿Q正传》,虽考论细节而着眼于全篇,并力求在《呐喊》《彷徨》所开创的中国现代小说的一个叙事传统中来发掘其意义。
本文主要研究了智能视频监控系统在当前矿山、油田、港口、化工、电力等行业安全生产中的应用。近年来,随着网络信息技术的飞速发展,智能视频监控技术得到了广泛的应用,传统的靠人眼监控的方式已经越来越不能满足当前工业安全生产的需要。随着计算机视觉技术的持续飞速发展,为快速分析大量的视频监控数据提供了有效的支撑,使智能视频监控技术在工业安全生产领域得到迅速普及。据调查,目前已经有多种类型的智能视频监控系统在工
存储石油化工产品时有极高的安全监测要求,传统油库监测系统采用人工观察视频监控的方式检测产品的存储是否存在安全问题,该方法在火灾应急行动中存在时效性低、响应慢及漏检等问题。针对上述问题,文章提出了一种基于深度学习的油库安全监测方法,在原始YOLOv5(单阶段目标检测算法)的主干网络添加坐标注意力机制(CoordinateAttention,CA),该机制可以得到方向感知和位置感知的注意力图,将这些图
运用2016年“十三五”规划出台伴随的产业政策变更作为外生冲击事件,通过双重差分(DID)模型分析产业政策的优化调整是否有利于抑制企业金融资产配置行为。实证分析得出:首先,产业政策的优化调整能够显著抑制调出行业中企业金融资产的配置行为,其中对于短期金融资产配置的抑制作用更为明显;其次,异质性分析得出,上述效应对于民营企业更为明显;最后,产业政策优化调整通过补贴套利的抑制效应和生命周期的延长效应两种
伴随着当今社会建筑规模的不断扩大,实际建筑工程中所涉及的给排水管道复杂程度越来越高,如果给水排水的施工质量得不到有效保障,那么必然会对广大用户的使用感受产生直接影响。因此,必须正视当前建筑工程给水排水施工技术中存在的问题,寻找科学高效的解决方案。文章就建筑工程给水排水施工技术要点进行深入的分析。
勒索病毒近年逐渐发展成了恶意软件中最为突出的威胁,新的变种与技术不断涌现以绕过现存的杀毒软件和其他入侵检测方法。回顾勒索病毒的演化历程,深入剖析其功能结构与具体工作原理,重点聚焦于传播感染方式、C&C服务器连接、设备加密锁定、如何规避监管兑现勒索收益等相关方面。同时归纳总结了可行的一般性防范措施与常见的检测指标,对勒索病毒的发展趋势进行展望,并对一些现存问题及研究方向进行探讨。
针对PM2.5浓度预测中传统机器学习算法无法对数据内部隐藏特征进行深层次挖掘,而深度学习算法在数据较少情况下效果不佳的问题,综合考虑深度学习与随机森林的特点,提出一种基于深度学习与随机森林的PM2.5浓度预测组合模型。模型以气溶胶光学厚度(AOD)遥感数据、气象再分析数据和PM2.5地面观测数据构建训练数据集,通过深度学习方法对训练数据内部深层次隐含特征进行提取,将提取得到的隐含特征用于随机森林模
<正>在我的记忆里,教师博学多才,能歌善舞,我暗下决心,自己也要当一名光荣的人民教师,所以,我选择了幼儿教育。不经意间,时光在平凡和平静中悄然流逝,我彷徨过,觉得幼儿园老师并没有我想象中的美好,每天和一群孩子吵吵闹闹,工作琐碎而复杂,很多次在脑海里闪过跳槽的想法。但每当看到孩子们期待的目光,听到他们充满童趣的话语,我又选择了留下。领导和同伴的帮助让我在成长的过程中充满了力量,渐渐体会到了作为一名幼
期刊
<正>在学校里,每天都要叫很多学生的名字,上课点名发言,对学生个别提醒……在统编教材三年级上册的口语交际里,刚好有一个是《名字里的故事》,在学生交流完之后我猛然发现,每一个孩子的名字,都饱含了家人的祝福。那些曾被一读而过的名字里,都有值得我们聆听的故事,也有可以让我们共鸣的期盼。这么多闪着生命光彩的名字,
期刊