考虑密集方向的双重加权离群检测和聚类分析研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:damai123123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息化时代的到来,无论是数据产生的渠道和方式,还是数据本身的大小、维度和类型都变得越来越多样化,这使得数据挖掘的发展更具有挑战性。离群检测和聚类分析作为数据挖掘中两个热门研究课题,它们对算法能够更有效地处理各种复杂形状数据集的要求也越来越高。本文针对现有离群检测和聚类算法存在的问题进行深入研究。受数学理论中向量点积在判断两个单位向量相似程度和方向分布作用的启发,本文提出指向数据点邻域分布最密集区域的密集方向(Dense Direction)的概念。将算法研究对象从一个数据点转移到一个区域,更加全面地探究数据点及其邻域内点分布的关联关系。基于密集方向概念,本文提出一种新的点加权策略。通过研究不同类型数据点密集方向所指区域的点分布差异,赋予每个数据点一个表示其邻域点分布情况的点权重。结合自然邻居概念,本文提出一种新的边加权策略。通过赋予每个数据点和其邻居之间一个表示二者紧密程度的边权重。本文将两种策略相结合提出一种双重加权方法,实现二者优势互补,解决了现有离群检测和聚类算法采用单一加权方法无法全面表征数据内部潜在结构信息的问题。针对已有离群检测算法无法检测出线形、复杂流形和多密度层次数据集中离群点的问题,本文提出一种考虑密集方向的双重加权离群检测算法DDW(A Double-weighted Outlier Detection Algorithm considering Dense Direction)。DDW在双重加权思想的理论基础上建立了双权离群度的概念,可以更准确地衡量数据点的离群程度。它既消除了算法对邻居参数敏感的缺陷,也提高了局部离群点检测的准确率。针对已有聚类算法在参数多且难以设置和无法处理密度差异较大数据集方面的问题,本文提出一种考虑密集方向的双重加权最小生成树聚类算法DDMST(A Double-weighted Minimum Spanning Tree Clustering Algorithm considering Dense Direction)。DDMST在双重加权思想的理论基础上建立了双权局部密度的概念,可以更准确地表征数据点邻域密度分布情况。引入最小生成树(MST)聚类思想进行核心点聚类和剩余点分配,解决了现有聚类算法对邻居参数敏感且难以应对复杂形状和多密度层次数据集的问题。
其他文献
无人机具有轻巧、成本较低、高移动性和部署灵活等特点,可以作为空中基站扩展更多可能的通信业务,被广泛应用于各个领域。无人机基站(Unmanned Aerial Vehicle Base Station,UAV-BS),不仅可以实现通信覆盖的迅速部署,确保移动通信服务的连续性和可靠性,同时还具有传统地面固定基站无可比拟的优势,比如可移动性等。本论文主要研究内容:在超5G(Beyond 5G Gener
学位
阿替洛尔(ATL)作为典型的β受体阻滞剂,被广泛用于治疗心血管疾病。由于其特殊的物化性质,不易被污水厂传统处理工艺去除,从而不断地被排放到环境中对人类健康和生态环境造成威胁。超声耦合压电材料降解有机污染物作为一种绿色高效的高级氧化法(Advanced oxidation processes,AOPs)近来受到了许多的关注。因此,本文通过水热调控合成单相纳米短棒状和片状铁酸铋(BiFeO3)晶体,并
学位
肿瘤风险预测中的关键挑战是选择代表性特征,每个代表性特征对于肿瘤诊断至关重要。因此,本文提出了一种基于图约束的贝叶斯因果图学习方法(A Bayesian causality graph learning method based on graph constraints,BCGC),该算法利用因果马尔可夫性质来发现特征与肿瘤风险类型之间的局部因果依赖关系,BCGC的关键之处在于由确定的图骨架生成的
学位
钢铁作为国民经济支柱的产业,以价格低廉、产量大等特点成为用途最为广泛的金属材料。添加合金元素是常用的改善钢铁材料力学性能的方法,但其较高的成本、对自然资源的需求以及对自然环境造成的影响不容忽视。最近的研究结果表明,引入层状、梯度等非均匀结构可实现强度与塑/韧性的协同改善。本文以T8钢和Q235钢为原材料,采用热轧复合制备了层状结构碳钢,并开展不同温度退火、不同温度淬火等处理,制备引入层状梯度结构,
学位
近年来,人民对居住环境的要求不断提高,国家为扩大内需、推进城市更新,全面展开了老旧住区的改造建设。国务院办公厅明确提出,在“十四五”时期,深入推进以人为核心的新型城市更新战略,并规定时期结束时,全国应完成所有2000年前建成的老旧住区改造。与此同时,居民的健康意识不断增强,而大型综合医院作为当地的顶级医疗服务机构,吸引着全市乃至全省的患者。由于医院自身仅能够为患者提供医疗服务,不具备其他生活服务功
学位
新型城镇化建设大力推进的进程中,我国经济发展也进入到了新常态阶段。在提高经济发展速度的压力下,地方基础设施投资规模不断攀升,地方政府债务规模也日趋庞大。2014年,党中央为了遏制地方政府债务的迅猛增长,一方面通过了新《预算法》,允许地方政府发行地方债;另一方面,在全国范围内推广PPP模式,将私人资本引入我国的基础设施领域。但由于地方政府存在对PPP模式认识不足的情况,出现了对私人资本的违规承诺或担
学位
近年来,随着以5G为代表的先进通讯技术的飞速发展,边缘计算模式从概念逐渐落地为助力新兴移动应用、创新人机交互方式、加速物联网大数据治理、完善工业生态的重要基石。边缘计算是一个复杂的系统,它创建了一个新的框架来支持无线网络和云计算之间的紧密集成。由于边缘计算通信和计算协同的特性,这方面的研究和开发面临着广泛的挑战,也是国内外学术界和工业界的研究热点。边缘计算是一种开放的、有弹性的、协作的计算模式,它
学位
伴随着我国乡村振兴、美丽乡村等国家战略的实施,国家乡村振兴局的正式挂牌,乡村建设工作持续推进,快速开展。乡村公共空间是乡村空间中最核心的部分,涉及村民公共生活的方方面面,它不仅是承担村民日常公共生活、公共交往的重要场所,也是传承乡土文化与乡村文脉的关键载体。乡村公共空间的建设与完善对于村民公共文化生活的展开、乡村的和谐稳定发展都具有重要意义。其中,近郊型乡村在发展的过程中由于受城市影响较大,具有复
学位
海藻酸盐及其水凝胶作为天然来源的生物多糖,因其具有良好的理化性质及生物学性能,被广泛应用于医用敷料、药物缓控释放、污水的处理等领域。利用海藻酸盐及其水凝胶研制能有效护理伤口的载药敷料一直是研究的热点。适宜的敷料能为伤口愈合提供良好的微环境。本文研究了壳聚糖、多孔明胶和海藻酸钙组成的核-壳结构的壳聚糖@多孔明胶@海藻酸钙微球(CPAMs)的制备及吸水性、水蒸气透过率、降解性及蛋白质吸附性评价。CPA
学位
交错桁架结构源于上世纪60年代的美国,目的是为多、高层公共设施(酒店、学校、医院)建筑提供更经济的新型结构形式。交错桁架结构楼层内部存在两倍的柱距使用面积,可以为建筑提供较大的空间,但由于结构在两个主方向刚度相差过大,有很大的动力特性差异。同时,由于结构在桁架方向刚度较大,抗震延性较低,不宜用于抗震设防八度以上地区。在相关课题的支持下,提出一种新型交错桁架-框架结构,此结构在改进原结构抗震性能的基
学位