基于多模态机器学习的毒蛇咬伤辅助诊断研究

来源 :广西大学 | 被引量 : 0次 | 上传用户:mlj1234567890
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
据世界卫生组织报道,全球每年有180万至270万毒蛇咬伤患者,其中死亡8.1万至13.8万人,造成永久性残疾40万人。大多数的医疗机构缺乏蛇伤救治的经验,容易出现误诊甚至漏诊,严重者危及病人生命。目前毒蛇咬伤诊断方法主要依靠医生的临床诊疗经验。为提高毒蛇咬伤辅助诊断水平,本文通过收集和整理蛇伤病人临床病历资料,建立包含文本和图像的多模态蛇伤数据集,对数据进行预处理,使用机器学习方法对毒蛇咬伤辅助诊断问题进行模型研究。本文主要成果如下:(1)本文建立了一个多模态蛇伤数据集。在梧州市某医院2014-2020年蛇伤病人临床病历资料的基础上,筛选出750份明确诊断为烙铁头蛇、竹叶青蛇和眼镜蛇咬伤的临床病历,然后根据蛇伤专家意见提取与蛇伤诊断密切关联的文本信息和伤口图像,对文本信息进行数值化描述和预处理,对伤口图像进行数据增强和特征提取,最后以蛇伤种类为类别标签,把与蛇伤诊断密切相关的文本和伤口图像进行关联,建立多模态蛇伤数据集。(2)本文提出了2个基于单模态数据的毒蛇咬伤辅助诊断模型。采用支持向量机结合主成分分析方法设计PCA+SVM毒蛇咬伤辅助诊断模型,在多模态蛇伤数据集中的文本数据上进行训练和测试,得到76.00%的预测准确率;采用VGG16卷积神经网络结合迁移学习方法设计VGG16+TRAINS毒蛇咬伤辅助诊断模型,在多模态蛇伤数据集中的伤口图像数据上进行训练和测试,得到97.33%的预测准确率。(3)本文提出一个基于多模态数据的双尺度交互注意力毒蛇咬伤辅助诊断模型。采用注意力机制结合深度神经网络方法设计多模态双尺度交互注意力毒蛇咬伤辅助诊断模型,使用多模态蛇伤数据集中的文本和伤口图像数据进行训练和测试,得到94.22%的预测准确率,并对比了直接拼接和双线性池化多模态学习模型的预测性能,实验结果证明了双尺度交互注意力模型对多模态蛇伤数据的预测性能更好。本文将机器学习方法运用到毒蛇咬伤的辅助诊断研究中,分别从多模态蛇伤数据集建立、单模态机器学习模型建立、多模态机器学习模型建立三个方面进行研究,最终为毒蛇咬伤救治提供一种快速、高效且低成本的辅助诊断方法,具有现实意义及应用前景。
其他文献
贝克喜盐草(Halophila beccarii)分布于亚太地区及非洲肯尼亚、坦桑尼亚的沿岸,我国北部湾沿岸是其主要分布区之一。贝克喜盐草是典型的潮间带海草,是许多浅海动物的食物来源,贝克喜盐草叶片小而密集,具有净化浅海水质的生态功能。通过植物富集重金属修复环境是修复受损环境的最佳方式,我国潮间带存在不同程度的重金属污染,贝克喜盐草对重金属生理响应和适应机制研究尚存空白,限制了其在潮间带环境修复工
学位
植物生长调节剂是广泛应用于农林业,对植物具有调控作用的人工合成有机化合物。枫香(Liquidambar formosana)作为极具潜力的亚热带绿化观赏树种,研究植物生长调节剂作用下枫香幼苗生长发育的变化,对枫香的育苗栽培具有指导意义。以一年生枫香为试验对象,探究不同浓度下(0 mg/L(CK)、40 mg/L、80 mg/L、120 mg/L)的赤霉素(GA3)、吲哚乙酸(IAA)和多效唑(PP
学位
报纸
改革开放后,国民经济迅猛发展,居民生活水平显著提升,科学技术的进步,改变了国人的生活方式,医疗健康逐渐成为社会广泛关注的话题,但就实际情况而言,大健康产业存在诸多缺陷,落后欧美发达国家以及部分东南亚国家,在市场竞争日益激烈的背景下,大健康产业投入增大,产业发展渐成规模。因此,本文将以大健康产业背景分析作为出发点,重点探析开发健康无公害食品的措施,以供借鉴。
期刊
在玻璃切割、变压器硅钢片生产、家具下料、皮革下料等行业生产中,存在着大量的排样问题。这些行业的企业面临着生产订单频繁、交货期短等难题,迫切需要提高板材用料的预测能力,以减少生产批次,助力企业进行生产决策。但是,排样问题属于NP-完全问题,无法在多项式时间内得到最优解及相应的板材高度值。同时,板材和毛坯的特征较多,传统的方法难以有效地进行板材用料的预测,需要寻找更合适的方法。数据挖掘在企业数据的处理
学位
随着信息化社会的愈加成熟,智能化的数字城市建设成为大势所趋,大量信息系统的建成和使用,使人们对地理信息数据精细化、专业化和共享性等方面的要求更加严格,对于信息化孤岛,系统间不兼容等问题越加无法容忍。针对以上问题,本文提出以地理空间为基础,利用三维建模技术以及云计算,建立统一通用的地理信息系统。地理信息系统高效管理数字化城市建设,进一步提高营商服务水平,为领导决策提供可靠的依据和建议。本文简要阐述了
学位
局域表面等离激元共振(Localized Surface Plasmon Resonance,LSPR)吸收特性是纳米颗粒独特的光学性质,也是当今纳米光学领域的热门研究方向之一。LSPR能够增强纳米颗粒在可见及近红外范围光吸收、发光和光热转换,在光电通讯、光声成像和光热治疗等领域具有重要的应用价值。传统的具有LSPR性质的材料一般为贵金属纳米材料,其内秉的高载流子浓度决定了LSPR通常出现在可见光
学位
随着物联网、大数据、人工智能、5G等技术快速发展,开发低成本、自驱动、多功能的电子器件是这些领域的必然发展趋势。光电探测器件由于其将光信号转换成电信号输出特点,被广泛应用于成像、传感探测、检测等微电子行业。铁电薄膜材料具有介电调谐、储能、电卡制冷、光伏等多种应用功能,可以被用作开发新型多功能光电探测器的潜在材料。本文通过采用溶胶-凝胶法在Pt(111)/Ti Ox/Si O2/Si(100)衬底上
学位
我国是木材消费大国,木材市场需求缺口巨大,如何高效率地开发和利用原木已成为当下人们关注的焦点。目前,木材粗加工的多片锯拉条环节中主要以传统机器加工结构为主,利用安装不同间距多片锯的拉条机来完成木板裁切。传统木板拉条方法是通过人工识别木板的宽度,再利用红外激光比对后完成木板裁切。这种方式效率较低,受主观意识及人工熟练程度影响较大,成品率相对较低,导致木材浪费,且人工成本较高。为了提高企业生产效率、降
学位
随着集成电路的集成度越来越高,器件的特征尺寸也随之不断缩小,逐渐接近其物理极限。将光子学器件与成熟的微电子技术相结合,实现单片光电集成是突破限制的有效途径之一,其关键课题在于开发与集成电路工艺兼容的高效、稳定的硅基光源。另一方面,为了突破太阳能电池的Shockley-Queisser理论极限,科学家们提出可以在太阳能电池中添加上下转换层,以拓宽太阳电池的光谱响应,减少吸收损耗。探索基于稀土离子掺杂
学位