基于Kubernetes的深度学习平台的研究与实现

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:wcj_lp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为人工智能领域的重要研究方向,深度学习加速了各行业的落地应用,受到了日益广泛的关注。高精度的深度学习模型可以解决各领域的诸多复杂任务,但需要研究人员使用大规模、高性能的计算资源进行多次训练、反复优化。近年来,国内外各大公司都在聚合底层计算资源、研发深度学习平台,旨在为用户提供便捷的模型训练机制。而如何提升服务质量、提高资源利用率、为用户提供高可用的友好型系统则成为了研究的关键。本文主要的研究工作如下:(1)在弹性伸缩方面,本文提出了一种服务级别的预测式水平弹性伸缩策略Pre-AS。该策略通过集群监控工具对集群中的历史数据进行采集,并使用CNNLSTM混合网络对未来的数据进行预测,最终实现了一种能够提前完成扩容或缩容操作的技术方案。通过对比实验,证明了该策略具有感知性,可以降低服务响应时间,使服务质量得到提升。(2)在集群调度方面,本文提出了一种改进的调度策略DLB-scheduler。该策略对节点进行分组、对集群底层异构的资源进行抽象,同时对打分策略进行了优化、将GPU作为打分阶段的评判标准,最后将Pod动态调度到节点。经过对比实验,证明该策略能够提高集群的负载均衡程度、从而更有效地利用资源。(3)基于以上两种策略,本文搭建了一个基于Kubernetes的深度学习平台。该平台底层聚合资源、向上实现开放共享,不仅为深度学习的研究人员提供便捷的模型训练及数据存储的功能,也为资源的管理人员提供了简易的资源分配及用户管理的机制。最后,本文对平台的主要功能进行了测试,证明了平台的可用性与实用性。本文构建了具备高可用性的深度学习平台,实现了数据存储、模型训练及资源共享。该平台能有效聚合底层计算及存储资源,实现了资源互通和深度利用;也为深度学习的研究人员减少了学习研发成本,降低了人工智能研究的门槛;同时实现了模型算法等资源的共享,进一步提升产学研主体智能化、信息化水平。
其他文献
<正>目的:评价利用16层螺旋CT进行脑动脉血管成像的可行性。方法:81例均在Toshiba 16层Aquilion螺旋CT 扫描机上进行,注射造影后于17~18秒行动脉期扫描, 扫描技术条件为1mm层厚,1mm重建间隔,螺距15,
会议
关联理论从认知的角度分析语言形式和语用理解的关系,在言语交际和话语研究中颇具解释力。关联理论认为,言语交际是一个“明示-推理”的过程,交际涉及说话人的明示和听话人的推理,并提出了异于传统意义的语境观——“认知语境”(Sperber&Wilson,1986)。同声传译作为一种特殊的人类言语交际形式,关联理论对之具有较强的解释力和研究意义。司徒·罗斌(1999)从“认知语用学”的角度利用关联理论来阐释
学位
机器学习有着出色的建模预测能力,已经逐渐深入到各行各业中,并在医疗健康领域也有着广泛的应用研究价值。随着人口老龄化的加速,慢性病的发病率急剧增加,给患者造成了持续且严重的健康负担和经济负担。采用机器学习方法进行慢性病健康风险预测研究,可以给医院管理者提供决策支持、给予患者健康引导和疾病风险警示,具有重要的现实意义。围绕慢性病健康风险预测,本文开展了以下三个方面的研究:(1)研究了基于Stackin
学位
作为非流利性的主要类型之一,自我修正现象广泛存在于日常口语中。以往研究者探讨了一语、二语习得中的各类口语修正现象,近年来,口译产出中的修正现象逐渐吸引了国内外学者的目光。然而,少有研究对不同语对间口译产出中包含的自我修正现象进行比较分析。本研究根据Levelt提出的言语产出模型中自我修正及自我监控理论,对学生译员在英译汉、西译汉交传中出现的自我修正现象及产生的编辑语进行讨论,探究学生译员在交传中出
学位
同声传译作为一项复杂的即时性翻译活动,要求译员必须一边接收来自讲者的信息,一边将信息传递给听者,“一心多用”常常为译员带来极大的心理压力,特别是对于初学同声传译的学生译员而言,在同传过程中普遍存在不同程度的焦虑。而在以往口译研究中,前人多以交替传译焦虑以及其成因和对口译表现的影响为研究对象,因此,本选题拟通过问卷调查法、实验法和访谈法研究学生译员在英汉同声传译认知加工过程中的焦虑级度,其来源以及其
学位
济宁二号煤矿选煤厂通过实施中矸磁尾分开单独回收的技术改造,将高灰矸石磁尾改为单独脱水回收后进入矸石系统外排,并增加煤泥离心机对中煤磁尾进一步脱水,有效降低了洗混煤产品的灰分和水分,提高了洗混煤发热量,取得了良好的经济效益。
期刊
期刊
目标物体轮廓检测任务是计算机视觉领域中的一个研究热点,然而现有基于深度学习的目标物体轮廓检测方法在对于如何使用基础网络提取的特征以及如何增强这些特征之间的相关性上仍有许多进步的空间;另一方面,现有的方法对基础网络提取特征能力的利用率不足,导致检测效果无法更近一步。因此,如何使用基础网络提取的特征、增强特征之间的相关性以及如何增强基础网络提取特征的能力就成为了重要的研究问题。针对上述问题,本文通过对
学位
目的:探讨首荟通便胶囊对腹部手术术后排气与胃肠功能恢复的临床疗效。方法:选取2019年3月至2021年3月在重庆市中医院接受腹部手术的患者107例作为研究对象,根据患者是否接受首荟通便胶囊治疗分为对照组(n=54)与观察组(n=53)。对照组接受术后常规治疗,观察组在对照组的基础上服用首荟通便胶囊,比较2组患者术后排气时间、胃肠功能恢复、相关因子水平,并进行疗效评价。结果:行腹部手术后的患者治疗后
期刊
<正>黄××,女,30岁.1993年6月12日诊.7天前中午,天气炎热,三夏繁劳,热渴交作,饮冷水拌生蜂蜜一碗,饮后片刻即觉胃脘部疼痛不适,又强劳至傍晚.胃脘都剧痛,泛泛欲吐,饮热水后稍舒.次日早上胃痛加剧,不能进食,强食则吐,伴见全身浮肿,尿清而少.曾在某院按“肾炎”、“胃炎”中西药来投治疗7天,效果不佳.诊见:胃脘痛,按之不减,得温稍舒.周身浮肿,皮色鲜明,按之没指,口淡无味,舌淡苔白厚腻,脉
期刊