一站式机器学习平台的研究与实现

来源 :山东大学 | 被引量 : 0次 | 上传用户:nienie123nie
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器学习技术特别是深度学习技术的发展与日益完善,使得机器学习在企业中尤其是互联网企业中的应用频率越来越高,使用范围也越来越广泛。尽管目前各种机器学习算法的理论基础日益完善,应用机器学习必备的硬件设备(CPU、GPU、存储训练数据的磁盘等)成本也越来越低,但是在机器学习技术的应用过程中还存在许多其他问题。机器学习属于比较专业的领域,而在互联网公司中需求是快速迭代的,对于一个需要使用到机器学习的小需求,算法建模和参数调优过程也需要算法工程师的参与,模型开发的人力成本比较大。而且在模型开发完成后,如何落地使用对于只是精通于算法设计,模型调优的算法工程师来说是个很大的挑战。据知名AI服务提供商Algorithmia发布的《2020年企业机器学习行情》报告显示,许多企业在部署机器学习以及后续的服务维护过程中面临着许多问题。针对上述在实际应用机器学习过程中遇到的问题,本文做了相关的研究并设计实现了一个一站式机器学习平台系统。该系统提供一站式的机器学习解决方案,功能可以覆盖机器学习业务的整个流程。该系统的核心功能包括:1.通过参数配置的形式快速构建模型训练作业。2.提供可视化建模工具,大大降低了模型开发的门槛。3.提供统一的模型管理平台,方便算法人员管理机器学习模型。4.提供一键部署模型到线上提供服务的功能和模型服务的监控功能。该平台主要使用JAVA语言开发,采用了 SpringBoot构建了整体项目架构,后端数据库采用了关系型数据库MYSQL、非关系型数据库Tair等。系统设计符合高内聚低耦合的设计思想,代码规范采用了阿里官方Java代码规范标准。该平台已经在公司内上线,并平稳运行中,用户量和访问量也在不断增加。截止到今日,平台已有在线服务1000+,各类模型和实验2000+,算法组件100+。平台的上线为公司内的算法团队提供了许多便利,极大的缩减了模型开发与上线的成本,平台每月的活跃用户达到了很可观的数量,新用户数量也在稳定增长中,达到了平台建设的预期目标。
其他文献
对绿色供应链等相关理论作了概述,归结了国内学者对绿色农产品生产供给的研究方向,将国内学者在绿色农产品生产方面和其相关主体的博弈分析研究成果进行了总结,得出了结论。
不同学历层次的人其收入对幸福感的影响会不同么?文章正是为了学历对收入影响幸福感的机制改变而设计的,基于CFPS2018数据库通过线性回归模型的得出结论:初中及以下学历人员
云南民族艺术节在一片热烈的赞扬声中落下了帷幕。它以绚丽多彩的民族文化艺术和显著的经济效益,使国内外来宾不得不对云南这块古老而神秘的土地刮目相看。人们沉浸在成功的
在媒体融合发展的背景下,传统的时政新闻报道方式,已无法满足受众对新闻信息的多元化需求。Vlog作为时政新闻领域中出现的新形式和新样态,符合移动化、社交化、可视化的传播
玉溪地区元江县境内的哈尼族,有十多个支系,如糯美、糯比、白宏、阿梢、布都、碧瑶、卡堕、西么佬、梭比、布孔、豪尼等。因各种舞蹈分布于咪哩、羊岔街、东峨、因远、都贵、
汉代发兵有四种信物:虎符、节、羽檄、诏书。王朝设有符节台管理符、节、玺印。虎符要与诏书同时使用。节的使用没有地域限制。羽檄曾一度独立作为发兵信物,表示情况紧迫,请求援
学生的核心素养与他们的学习生活、未来发展息息相关。当前课程改革的任务之一就是把核心素养渗透到教学中。社会责任教育一直以来备受国内外学者的关注,在各个国家的德育教育中,社会责任教育也被作为重要内容。社会责任在2017年颁布的《普通高中生物学课程标准》(2017年版)中被列为生物核心素养之一。培养学生的社会责任感也越来越受到生物教师的重视。教材是进行一切教学活动的基础,通过对高中教材社会责任教育内容的
自然界的风景是丰富的,是不可能全部画出来的。因此,要按照构图的一般规律去处理、组织、选择,最终形成主次关系、重点关系、空间层次关系、较好的透视关系,以及自身对景物的
笔者所译文本英语原文选取学术专著《我们的财富是相亲相爱》。该书的作者是美国人类学家凯伦·布里森,笔者翻译的是本书中的前三章。据彼得·纽马克对文本类型的分类,该文本
在线监测水质重金属含量是预防水质污染、科学治理污染的重要环节。阳极溶出伏安法因其高灵敏度和快速的信号响应成为水质现场检测的首选技术。遗憾的是,金属电极作为此检测方法的核心部件却难以实现绿色、长效、高精度的检测应用。为此,本文提出利用掺硼金刚石电极取代现行金属电极以满足应用需求。通过设计电极传感层结构,分步解决科学问题,实现研究目标。综合考察电极的微观结构特性及电化学行为,并通过真实检测性能衡量电极