论文部分内容阅读
基于Spark动态选择缓存替换策略的DBSCAN算法优化研究
【摘 要】
:
近年来,大数据技术不断发展,Spark成为目前大数据领域较为常用的计算框架。其设计内存计算提升执行性能,但RDD缓存替换会影响任务运行效率。DBSCAN聚类算法可在有噪声点的数据集中发现任意类簇,但传统聚类存在不足且Spark Mllib没有实现并行计算。据此对Spark缓存替换与DBSCAN聚类算法并行优化展开研究。根据Spark缓存替换LRU算法存在的问题,提出动态选择RDD缓存替换算法DSR
【出 处】
:
武汉纺织大学
【发表日期】
:
2021年01期
其他文献
随着经济全球化的发展,跨国公司已在市场舞台站稳脚跟,他们采取越来越多的策略方法去提高其竞争力、寻求集团利益最大化、实现愿景与全球宏观战略。跨国公司在寻求利益最大化的过程中通常追求利润最大化,而为了实现这一目标,运用转移定价进行税务筹划无疑成为了途径之一,也是目前较常实施的手段和途径。本文从C集团在中国安徽成立的三家法人企业出发,研究在禽肉类产品需求量增加,然而国内市场环境低迷的背景下,这三家法人企
学位
目的:分析慢性阻塞性肺疾病(COPD)合并非小细胞肺癌(NSCLC)患者的临床特征,分析肺功能及肺气肿程度在评价COPD合并非小细胞肺癌中的价值。方法:选取2013年10月至2017年12月宁夏回族自治区人民医院收住院COPD合并NSCLC患者(A组)、单纯COPD患者(B组)、单纯NSCLC患者(C组)各80例。收集各组患者一般资料、临床症状、肿瘤TNM分期、病理类型、肺功能、肺气肿评分、胸部C
学位
PCK即学科教学知识,整合了教学内容知识、学生知识、教学策略知识三个核心要素,是指以学生知识为前提、应用最有效的教学策略知识将学科专业知识转化为学生易于理解和掌握的教学内容知识,它是教学中最有效的知识;《普通高中化学化学课程标准(2017年版)》提出了五大化学学科核心素养,在新课标的指导下,新高考在命题方面更加注重以实际生产生活为背景,注重考察学生学生必备品格的形成、关键能力的培养和学科核心素养的
学位
专门学校是对有严重不良行为未成年人开展教育矫治的专门教育机构,是具有中国特色的未成年司法教育保护措施之一。但是伴随着强制性入学制度的取消以及未成年劳动教养制度的废除,专门学校教育矫治工作一直受到社会以及部分专家学者的质疑。2019年《中华人民共和国未成年保护法》和《中华人民共和国预防未成年犯罪法》两部未成年法律开启了修订工作,最新法律政策对于专门学校定位以及教育矫治工作提高了具体的要求,专门学校作
学位
科学的海域使用格局是沿海地区用海的重要基础,为提高海域结构合理性有着关键价值。文章首先选用1992年、2002年和2012年Landsat卫星影像数据作为研究区的主要数据源,建立用海类型的分类体系以及用海类型的相关解译标志,采用决策树遥感分类方法,实现对用海类型遥感信息的提取。然后运用CA-Markov模型对1992年、2002年和2012年的大连海域使用现状数据,并结合适宜性图像集,模拟分析了2
学位
化工过程中频繁发生的事故往往会造成巨大的环境破坏、人身伤害和经济损失,如果能正确的发现和处理异常操作情况,一些事故是可以避免的。虽然自动控制在提高工艺效率和安全性方面得到了广泛的应用,但化工过程中仍会出现异常情况。特别是对于反应精馏等复杂的强化过程来说,反应和分离过程的集成强化了过程的复杂行为,导致无法实现较高的转化率和较低的能耗。据我们所知,目前还没有系统的故障诊断与检测方法来识别反应精馏过程故
学位
莎草科植物适应性好,生境广阔,具有很高的潜在价值,目前对莎草科植物的种子萌发的研究较少,而种子萌发是植物生活史的关键环节,这样不利于莎草科植物的推广和利用。本论文以10种莎草科植物种子为材料,探究温度、光照、水分、酸度对种子萌发的影响,确定其休眠类型及休眠破除方法。主要研究结果如下:1、蕨状薹草最适宜的发芽温度为25℃,十字薹草最适宜的温度是20/30℃,羽状穗砖子苗最适宜的温度是20℃,球穗扁莎
学位
该报告选取《食品和农业社会学》一书的第一章为翻译材料,从功能对等理论出发探索社科文献的长句汉语翻译。众所周知,社会科技文献对我国的人文学科有着重要的指导作用。但是社科文献当中含有许多的长句子,而长句结构复杂,给译者带来不少困难与挑战。因此,在翻译时使用恰当的翻译技巧来解决复杂的长句值得研究。功能对等理论对社科文献中的长句翻译起着帮助作用。功能对等理论不仅要求译文和原文的信息对等而且帮助译者选择适合
学位
由于不同过滤纸对所用的纸浆有不同的要求,我们可以通过控制打浆程度,或者通过对细小纤维的筛除来解決过滤用纸透气性差的问题。但是某些特殊的过滤纸板要求纸质特别疏松,阻力特别低,仅靠控制打浆质量和筛除细小纤维尚不能满足要求,需要部分或全部使用纤维形态弯曲、富有弹性的丝光化浆。本论文以漂白硫酸盐针叶木浆为原料探讨了在不同处理温度、时间、碱液浓度下的纤维分析和纤维参数形态对滤纸物理性能的探究,得出最优配比并
学位