基于Spark平台的资源调度策略研究现状

来源 :电脑知识与技术 | 被引量 : 0次 | 上传用户：LittleCam

【摘要】

：

摘要：近年来，随着物联网和社交网络等网络技术的飞速发展，全球总数据量呈现爆炸式增长，大数据平台兴起，例如 Hadoop， Spark， Storm等优异的大数据处理平台，其中 Spark是基于内存处理的分布式计算平台，较为受欢迎。但是资源管理仍是大数据平台性能优化的核心研究，有效的资源管理对于调度的优化是非常重要。他们总结分析了目前国内外Spark平台资源调度策略的研究现状。　　关键词：大数据;S

【作者】

：

翁利国陈杰汪宇杰吴亦灵

【出处】

：

电脑知识与技术

【发表日期】

：

2019年1期

【关键词】

：

大数据 SPARK 资源调度性能优化分布式 big data Spark resource scheduling performance optimizat

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

其他文献

运用Orem自理学说指导精神分裂症病人自我护理

目的 :探讨运用Orem的自理学说对精神分裂症病人自我护理的影响。方法 :用住院病人护理观察量表(NOSIE)对 135例住院精神分裂症病人采用随机对照设计 ,实验组运用Orem理论采

期刊

精神分裂症OREM自理理论自我护理SchizophreniaOrem theory Self-care

穴位注射药物治疗季节型过敏性鼻炎的疗效

过敏性鼻炎又称变态反应性鼻炎，为机体对某些变应原敏感性增高而出现的鼻腔黏膜病变所引起的变态反应，当变应原随着吸入的空气进入鼻腔后，使鼻黏膜处于致敏状态。病人表现打喷嚏

期刊

过敏性鼻炎穴位注射变应原药物治疗病人鼻黏膜疗效季节效果空气

一次性盲端三通管的制作及其应用

期刊

三通管化疗药物输液器注射器乳头推注联合化学疗法联合化疗连接头肿瘤病端可

护士输液过程中不应忽视的几个问题

期刊

针头斜面静脉输液护理人员液体渗漏三查七对一次性输液器临床护士无菌操作静脉穿刺刺激性强

从数据关联的角度剖析字符设备驱动中的初始化函数

摘要：嵌入式系统的应用覆盖了消费类电子、智能家居、汽车电子等诸多领域，字符设备驱动是嵌入式系统课程教学中的重点和难点内容，其中初始化函数作为向Linux内核加载驱动程序的入口函数，实现了字符设备、设备文件和设备驱动之间的相互关联。介绍了有关初始化函数的关键数据结构体，深入剖析了关键数据结构体之间的信息传递模式和关系建立方法，并给出了初始化函数的典型代码结构。本研究有助于电子信息工程等相关专业的学生

期刊

嵌入式系统字符设备驱动初始化函数数据关联Embedded systemsCharacter device driversInitialization

髋关节置换术病人的家庭康复指导

人工髋关节置换(total hip replacement，THR)是解除髋关节疾患病人的病痛、纠正畸形、恢复功能的一种行之有效的方法，而康复指导是保证治疗成功的重要因素。康复指导分为住院期

期刊

髋关节置换术家庭康复指导功能锻炼指导生活方式

偏方治疗老年顽固性便秘10例

期刊

顽固性便秘老年病医院胃肠蠕动导泻药生首乌生黄芪呕吐者止呕便秘者水煎

可调压输液器的制作及使用

期刊

输液器茂菲氏滴管静脉输液静脉穿刺穿刺针管内气体病人血压临床应用血管弹性休克病人

基于Spark平台的参数优化研究现状

摘要：近年来，为迎合大数据时代的需求，诞生了一批大数据处理平台，包括Hadoop，Spark，Storm等，Spark以其独特的优势在此中最受欢迎。尽管Spark的应用得到了大力推广，其性能还存在严重问题，很多学者正致力于寻找提升性能的有效途径。针对这一问题，他们从优化相关配置参数的角度出发，分析并总结了参数优化对Spark平台性能的重要影响以及目前国内外的Spark参数优化技术。最后，归纳了Sp

期刊

大数据SPARK性能配置参数参数优化big dataSparkperformanceconfiguration parameterparame

基于Spark平台的资源调度策略研究现状

与本文相关的学术论文