基于动态探针的多源异构数据融合与可视化技术研究及应用

来源 :青岛科技大学 | 被引量 : 1次 | 上传用户:any_ray
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据时代,随着企业各种业务的发展和信息化建设的成熟,企业的信息系统中逐渐积累了海量的数据,这些数据背后蕴含着巨大的商业价值。但是企业发展过程中,各业务的信息系统之间普遍存在信息共享程度低、信息与业务流程和应用相互脱节等问题,容易导致企业内形成信息孤岛。特别是企业为了实现工业流程和技术的程序化,需要庞大的技术数据支撑,这不仅需要企业内部解决信息孤岛问题实现数据共享,还需要与很多不同的工业企业的数据进行融合。因此,为了实现企业内部或外部之间的数据融合,一些企业开始挖掘数据之间的关联关系,试图将积累的海量数据打通,从而搭建数据空间。针对此现象,本文提出基于动态探针的多源异构数据融合模型来实现数据之间的融合,其主要内容如下:提出基于日志分析的数据融合可视化模型,针对企业业务系统中广泛应用的关系型数据,通过分析不同系统的全链路访问日志,建立跨域数据间的动态关联模型,以力导向图可视化的方式,给出数据融合后的关联量化结果,能够挖掘数据之间的关联关系随时间推移的演化规律、发掘信息系统中存在的热点数据和探索不同用户之间的数据访问差异等有效信息,为跨域数据融合、数据空间构建及业务流程优化提供可视化支撑。提出基于模糊逻辑的数据融合框架,通过使用动态探针收集不同应用系统的全局数据结构、系统运行过程中涉及到的数据和各种日志文件等关键信息,分别从模式、实例和日志三个层面构建面向企业数据空间的数据关联模型。在模式关联层面,采用结合语义分析的多维相似度判别算法实现模式数据的相似性挖掘;在实例关联层面,针对数值型、字符型等结构化数据与长文本型等非结构化数据,利用特征向量相似度分析与深度学习相结合的自编码算法完成对不同数据的关联匹配;在日志关联层面,通过分析数据访问日志中的等价关系建立不同数据之间的关联。此外,为解决数据在多个维度上相似值无法比较的问题,采用基于模糊逻辑的推理模型,综合使用数据在不同维度上的相似值来构建衡量数据相似的归一化值,从而实现基于模糊逻辑的数据融合。根据上述提出的两种方案,搭建基于动态探针的数据融合可视化系统。通过部署动态探针收集存储不同维度上需要分析的数据,将基于日志和模糊逻辑分析的两种方案算法化,作为数据融合分析的根基,搭建前后端分离的数据可视化系统。围绕数据分析实现系统的设计、开发和部署,满足用户数据融合的可视化需求,并通过所搭建的系统验证所提方案在数据融合,构建数据空间过程中的实际应用价值。
其他文献
在药物合成中,将取代甲苯氧化制成取代苯甲醛的应用非常广泛,通常,制备取代苯甲醛,有如下几种方法:取代苯甲醇直接氧化法,由取代氯化苄在溶液中水解,蒸馏制得取代苯甲醇,再经氧化制得取代苯甲醛,但是这种方法成本很高,已无工业化意义。在目前的工业化中,制备取代苯甲醛最常用的方法之一是二氯化苄水解法或氯化水解法。适当条件下进行氯化取代甲苯的侧链,得到的产物是亚苄基二氯,下一步在强酸强碱的水环境中水解及精馏可
学位
随着计算机技术和网络技术的进步,以信息化工具优化制造业的管理方式迅速发展,信息化给我国制造业带来了新的发展机会。和传统的管理工具类似,H公司的ERP项目提供的主要功能是服务,而不是实物,因此需要投入更多的人力资源成本和智力成本,项目的成果直接取决于项目人员的智力和创造力。人力资源作为ERP项目中的核心资源,如何激励项目人员积极发挥主观能动性是ERP项目的核心要素和成败的关键。通过结合H公司ERP项
学位
随着5G技术的广泛应用,以及边缘计算和车载应用的快速发展,车联网(Internet of Vehicles,Io V)已成为目前最具有前景的场景之一。但快速增长的车载应用为边缘网络带来了极大的压力,同时车辆的移动性加剧了边缘网络进行资源分配的复杂性,因此如何在车联网中进行实时、高效的资源分配是完善车联网应用环境的关键。本文针对此问题提出了解决方案——基于交通流量预测的边缘智能协调框架(Edge I
学位
目前在世界经济全球化以及生产国际化背景下,中国市场在很多领域已经成为世界瞩目的焦点。尤其是在中国巨大的智能手机需求规模增长下的手机保护壳企业,把中国市场作为企业重点开拓的发展方向,很多外资手机壳制造企业强势打入中国市场,如何根据中国消费市场特征开拓市场是外资企业保持竞争优势,扎根中国本土市场的关键。本文研究以美资O公司手机壳产品营销为研究对象,对O公司在中国市场的营销策略改进开展研究。从公司组织架
学位
纳豆激酶(Nattokinase,NK)作为一种微生物酶,对于血栓、高血压、高血脂及动脉粥样硬化等心脑血管疾病的预防及治疗具有良好的功效,常用其口服给药的制剂形式。但纳豆激酶口服给药过程中容易受到化学氧化而发生降解或直接变性失活,较难以整体直接透过胃肠道达到吸收的目的,应用局限性较大。针对上述缺点,本课题研制了一种纳豆激酶的经皮给药制剂——传递体凝胶剂,旨在通过无创的经皮给药方式使纳豆激酶免受pH
学位
核电工程是CN公司主营项目之一,向来有多地并行的情况,从工程实践中出现一些共性现象,比如物流支持的延宕,再比如实时库存超额等,在此情况下,企业如何优化库存并尽可能降低无效库存成为各大企业关注的焦点。投资金额巨大、动工周期冗长、工程物料质量水准超高、品类多样数量级大、不增加成本负担前提下需要持续性供应等,都成为在营运工程时的把控关键。作为主要研究目标,CN公司眼下建设过程中的库存信息和数据是最直接研
学位
随着我国经济的高速发展,客户对独立第三方财富管理的需求迅速增加。第三方财富管理独立于金融机构给客户提供理财服务蓬勃发展,J财富管理公司就是这样一家借助于互联网开展财富管理服务并尝到甜头的第三方财富管理机构。随着竞争的日趋激烈,产品供过于求以及同质化严重,J财富管理公司需要从传统的以销售产品为中心的经营模式转变到以满足客户需求为中心的客户关系管理模式上来。本文以J财富管理公司客户关系管理为研究对象,
学位
采用文献资料法、逻辑分析法对后疫情时代国内职业体育赛事的现状进行分析,为此后的开展路径提供借鉴。研究结果表明,后疫情时代国内职业体育赛事赛制转为赛会制、赛程被迫压缩和采用闭环管理。当前存在赛事收入受到重创、赛事影响力大打折扣、疫情反复意外频发和运动员心理压力加剧等问题。以国外职业体育赛事为镜鉴,提出路径选择:构建疫情防控常态化,扩大赛事线上影响力,并逐步恢复常规化收入,同时关注运动员的心理压力。
期刊
在众多生物识别技术中,人脸识别技术作为应用最广泛的一种生物识别技术,受到大多数研究者的追捧。然而,二维人脸识别广泛应用的同时,暴露出越来越多的问题。二维人脸识别主要依靠彩色图像进行特征提取,但是彩色图像只包含人脸的纹理信息,缺乏立体信息。因此在光照暗淡、面部遮挡的环境下,识别效果非常低。而三维人脸数据凭借其三维的、立体的特点,促使越来越多的学者转向三维人脸识别研究。同时,随着深度相机的普及,获取人
学位
社会发展,人类进步,人才始终是最重要的资产,人力资源管理是企业经营中重要的管理环节。薪酬管理在人力资源管理中不可或缺。M公司是柳州一家经营多年的健康养生服务公司,虽然经历了多年发展,在当地也有一定的影响力,但受其它康养公司的追击,M公司人才流失加剧,业务量持续下滑,M公司在薪酬管理上暴露了诸多问题。本文综合M公司经营管理的实际情况,从薪酬结构、薪酬水平、薪酬调整等环节分析了M公司在薪酬管理的现状,
学位