中冶赛迪区域生产数据处理系统的设计与实现

来源 :重庆大学 | 被引量 : 0次 | 上传用户:kelusi09
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
生产型企业的发展中总会伴随问题不断暴露,数据量暴增的时代带来的不仅是商机,同时也是严峻的考验。在数据呈现4V(大量、多样、高速、低价值密度)体征下的环境中,如何将企业各环节所得数据加以合理利用是问题所在。对此,普遍通过对数据去噪、去重、建立关联规则后,使用挖掘技术分析清洗后数据,并利用可视化手段向用户展示其价值趋势,从而充分利用数据价值来达到企业级决策支持,进一步推动企业发展。本文研究的区域生产数据处理系统依托于中冶赛迪公司在区域生产中的实际开发项目,旨在解决中冶赛迪公司内部的业务数据、实时数据、离线存储数据巨量、冗杂等问题,通过开源数据挖掘工具将多种数据源进行采集、预处理、分析和挖掘,以帮助指导生产、管理和运营等。整个系统自底向上划分为数据采集层、数据预处理层、分析挖掘层和可视化展示层。本文主要完成了以下3个方面的工作:(1)通过研究数据挖掘的原理、挖掘数据类型、挖掘流程、数据挖掘原型以及数据挖掘算法,结合分析中冶赛迪公司需求,针对公司内部海量的数据建立了数据挖掘机制,为后续系统的开发打下了良好的基础。(2)通过对选题背景、领域现状及完成该系统所涉及的相关理论、算法和工具进行了概述,确立了如下的技术路线:选取Springboot+Spring MVC+Mybatis框架集搭建系统整体架构;在应用层使用API调用KNIME进行数据挖掘处理分析,采用workflow(工作流程图模型)方式将数据挖掘算法具现化为模型建立;利用技术相对成熟的ECharts作为可视化工具,以折线图、柱状图、散点图等形式展现挖掘数据结果。(3)为了使用挖掘处理技术有效利用和分析数据,深入剖析了用户需求,以决策树算法为例,完成了区域生产数据处理系统的设计与实现。详尽阐述了系统结构、功能和挖掘模型的设计。主要论述了数据挖掘应用中读取数据、分离数据、标记分类、建立决策树、预测分类、评价决策树的功能实现,并针对于实现过程中决策树的相关表现,利用PMML(Predictive Model Markup Language)对原模型进行了改进。结果表明该模型改进更能有效的处理区域生产数据处理系统中数据分类和模型移植问题。
其他文献
茄子是夏秋季的主要蔬菜之一,采后在常温下呼吸代谢旺盛,贮运不当极易引起失水萎蔫、腐烂变质,常采用低温冷藏进行保鲜,但不适宜的低温会使茄子发生冷害,严重影响茄子品质。本文以‘黑冠’墨茄为试验材料,研究了贮藏温度对茄子采后自发气调包装(MAP)保鲜效果的影响、间歇升温结合MAP对茄子冷害和贮藏品质的影响,以及从茄子的细胞壁、细胞膜、抗氧化系统及相关基因的表达水平探讨了间歇升温处理减轻茄子果实冷害的机制
琼蛛属Qiongthela Xu&Kuntner,2015隶属于蛛形纲Arachnida,蜘蛛目Araneae,中纺亚目Mesothelae,节板蛛科Liphistiidae。该属蜘蛛寿命较长,迁移扩散能力差,特异性分布,是研究生物地理学极好的模式生物。但是,迄今为止,国内外对于琼蛛属的研究较少,研究工作多集中于新种的描述上,鲜有该类群的分子系统发生的研究报道。目前,琼蛛属蜘蛛已知有7种,其中中国
细胞微环境中存在大量酶、细胞因子等可溶性生物分子,它们在控制许多复杂的细胞行为方面起至关重要的作用,如细胞间信息交流和物质交换、细胞免疫、细胞粘附、细胞极性、细胞迁移和细胞分化等。这些生物分子表达水平的异常变化将导致微环境功能障碍、细胞病理变化、甚至机体功能异常,如正常细胞癌变、Ⅰ型糖尿病、胱氨酸尿症、心血管疾病等。因此,开发原位监测天然细胞环境中这些生物分子活性的技术是非常有必要的。目前,相关研
为了对云烟99的关键栽培措施和烘烤变黄特性有进一步的了解,本文通过单一因素以及暗箱试验的方法,开展了该品种与主栽品种云87对比试验,以及施氮量(7Kg/亩、6Kg/亩、5Kg/亩)、移栽期(4月15日、4月25日、5月5日)、种植密度(1200株/亩、1100株/亩、1000株/亩)、留叶数(20片、18片、16片)、采收成熟度(适熟、欠熟、过熟)和变黄特性的试验研究。主要研究结果如下。1.该品种
相位敏感型光时域反射计(Phase sensitive optical time domain reflectometry,简称φ-OTDR)利用光纤中后向瑞利散射光进行振动传感,具有传感距离长、多点同时探测、抗电磁干扰等优点,在长距离周界安防、管道安全预警、输电线路安全监测等领域有着广阔的应用前景。在多种实现长距离φ-OTDR传感的技术手段中,相干探测利用本振光对散射信号放大作用来提高传感距离,
森林资源是国土空间重要生态本底与关键发展资源。随着社会和科学技术的发展,人类对森林资源的认知与利用经历了“盲目到有序”、“用材到多效益”、“定性到定量”、“各类到整体”、“静态到动态”的过程,资源科学与资源管理规划逐步发展。从国家自然资源部的成立到“多规合一”的国土空间规划的提出,综合统筹协调各类资源,改革多规并行下的多类资源监管与规划方式成为重点亦是焦点。以“刻画资源禀赋、赋能地方发展;统筹配置
通过远缘杂交得到的各种鱼类品系,在遗传育种和生物进化等方面都具有重要价值。本研究对鲤亚科鱼类中的锦鲤(Cyprinus carpio haematopterus,KOC,2n=100,♀)与鲤科鮈亚科鱼类中的稀有鮈鲫(Gobiocypris rarus,GR,2n=50,♂)进行远缘杂交,得到了二倍体和三倍体杂交子代。本文的主要研究内容包括:1.对亲本以及F1代中两种不同倍性杂交鲤鮈的外形特征、D
随着物联网技术的持续快速发展以及高速5G网络的普及,终端设备的种类和数量急剧增加。数据的爆发式增长是万物互联时代下的主旋律,终端的存储设备资源面临巨大的存储压力。同时,边缘存储在边缘计算领域扮演重要角色。与传统云存储不同,边缘存储更接近终端设备,通过高速网络为终端设备提供强时效性的存储服务。云-边-端协同存储是面向未来海量数据存储的新兴存储架构。目前,边端协同存储的研究重心集中在边缘存储。例如,如
环境刺激响应性水凝胶是指随着pH值、温度、光等外界环境的刺激使得水凝胶的形状、渗透速率、别识性能等也发生相应的变化。水凝胶具有较好的生物相容性,在适用于人体或其他生物组织时不会引起太大程度的炎症反应、凝血作用或者组织损伤。因此水凝胶在生物组织工程和生物医药等领域均得到了广泛的应用,例如活性酶的包埋、人造肌肉、药物缓释、药物载体等。温度是反映人体健康的一个重要的生理参数,并且比较容易控制,因此温度敏
衰老是生物体功能完整性下降、稳态丧失并最终导致死亡的过程。如何延缓衰老和防治老年病已成为衰老生物学研究的重要课题。饮食限制(Dietary restriction,DR)是最有效的改善健康和延缓衰老的非遗传干预措施之一,能够改善多种无脊椎动物、啮齿动物和灵长类动物的衰老及衰老相关疾病。转录组学和蛋白组学的联合分析有助于发掘饮食限制延缓衰老过程中新的分子或作用机制。因此,本课题以黑腹果蝇(Droso