AP聚类算法研究及其在电子病历挖掘中的应用

来源 :大连理工大学 | 被引量 : 14次 | 上传用户:oklizheng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据时代,如何从数据中获取知识是一个非常重要的研究课题,数据挖掘和知识发现是从数据处理到决策支持的关键步骤。基于代表点的聚类是一种有效的无监督学习方式,它可以从不含类别标签的数据中提取知识,目前已经在客户细分、社区发现、异常消费行为检测、设施选址、医疗临床路径抽取等问题中展现出了巨大的应用价值。AP聚类是近年来提出的一种基于代表点的聚类算法,其在绝大多数数据集上都可以得到比传统聚类算法更优的聚类结果,并且在聚类过程中,无需人为设定初始代表点集合,簇的数量等等。AP聚类自提出以来,就受到了人们的青睐,目前已经在商务智能和数据挖掘中扮演了重要的角色。然而,在最近几年,数据科学得到了飞速的发展,新的数据形式层出不穷,新的数据问题不断涌现。例如电子病历数据,具有显著的动态性、多元异构性、大规模性等特征;而对电子病历的数据挖掘也从浅层问题进入深层问题,在建模分析过程中,需要考虑的因素更多,需要利用的信息更全面。标准AP聚类受到了前所未有的挑战:1)标准AP聚类只能处理静态数据,但是动态数据所占的比重却在逐年上升;2)标准AP聚类只能发现球形簇,但是随着数据形式的多样化,数据对象的分布结构正在变得越来越复杂;3)标准AP聚类算法复杂度相对较高,不适用于大规模数据聚类问题,但是在各行各业中,数据的规模正在呈指数增长。针对以上三个问题,本文分别给出了解决方案,并提出了适用于动态数据环境的增量式AP聚类,可以发现复杂形状簇的任意形状簇AP聚类,以及可以用于处理大规模数据聚类问题的快速AP聚类。本文还将以上三种聚类算法用于电子病历数据挖掘,从大量治疗记录中提取典型治疗方案,融合电子病历包含的多源信息实现治疗方案的个性化推荐。论文的主要研究工作如下:1.增量式AP聚类。分析了增量式AP聚类问题中存在的难点,并提出了两种解决方案。在此基础上,提出了两种增量式AP聚类算法:基于K中心的增式AP聚类和基于近邻赋值的增量式AP聚类。不仅从理论上分析了两种增量式AP聚类算法的合理性,还通过在真实数据集合上的计算实验验证了两种增量式AP聚类算法的有效性。2.任意形状簇AP聚类。通过对现有的两大类任意形状簇聚类算法的分析指出了局域相似度在任意形状簇聚类问题中的重要性,并讨论了从特征相似度到类别相似度转化的一般化方法。根据在类别相似度矩阵上的消息传递,提出了任意形状簇AP聚类算法。在人造数据集和真实数据集上的计算实验均表明本文所提方法可以有效发现具有复杂形状的簇。3.快速AP聚类。提出了两阶段式快速AP聚类算法。该算法首先通过选择潜在代表数据对象对因子图进行压缩,然后通过去掉不必要的消息传递对因子图进行稀疏化。最后通过在不完全因子图上的消息传递,实现对所有数据对象的聚类。计算实验表明,本文所提出的快速AP聚类算法可以在保持标准AP聚类优良的聚类性能的同时,大幅度地提高AP聚类算法的效率。4.典型治疗方案发现与推荐。首先根据电子病历中的人口统计学信息和诊断信息对病人进行聚类,以发现特定的病人群落;然后通过对药品联合使用网络划分,发现药品之间的联合使用关系;接着对电子病历中的治疗记录进行聚类,并根据聚类结果提取典型治疗方案;最后通过匹配病人群落和治疗记录的聚类结果,为指定的病人群落找到最佳的治疗方案。本研究具有重要的理论意义和应用价值:1)通过对标准AP聚类的拓展,使其具备有效分析和处理新型数据的能力,为数据科学的发展提供了新的工具;2)对标准AP聚类的改进和提升涉及到许多聚类领域中的经典问题,本文的解决思路对其他聚类算法的改进和设计同样具有启发作用;3)从大量治疗记录中提取得到的典型治疗方案,可以为医生设计和改进治疗方案提供素材;融合电子病历各部分数据的治疗方案个性化推荐,可以为医生的临床决策提供数据支持。
其他文献
“京南花月无双地,蓟北繁华第一城。”(清/朱岷)几个世纪以前的天津,不仅以其富庶繁华吸引了浪漫的诗人、雅会的鸿儒.而且吸引了南来北往、熙熙攘攘的客商。
当前,拆迁过程中的矛盾日益突出,因拆迁问题引起的上访也越来越多,拆迁难已经成为各地普遍存在的一个问题.
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
世界三大不可循环能源石油,煤炭,天然气在世界范围内都面临着短缺的问题,全世界的科学家也正在研究如何用生物能,水利,地热,风力,太阳能和核能来解决能源短缺问题,但这些新能源的成本
为了对海南省房地产有个基本的判断,我们就海南房地产市场进行了专题调查研究,先后用了二十天左右时间,走访了12个厅局,实地考虑了30多个楼盘,发放和回收了1260多份专题调查问卷,与
住房保障作为社会保障制度的重要内容,得到各级党委和政府的高度关注,也是城镇中低收入居民家庭亟待期盼解决的问题.
根据我司《关于深化交通职业技术教育教学改革的通知》(科教职字[1999]097号)要求,交通职业技术学校教学指导委员会组织有关专家,对提出教学改革立项申请的项目(共49所学校,99个
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
【正】 江泽民总书记在全国第三次教育工作会议重要讲话中指出:"要说素质,思想政治素质是最重要的素质。不断增强学生和群众的爱国主义、集体主义、社会主义思想,是素质教育
建筑物是人们生存生活的重要场地,我们必须从本质需求出没,针对国内的建筑策划开展节约型设计。