基于大数据平台的通讯数据管理系统研究与应用

来源 :湖北工业大学 | 被引量 : 0次 | 上传用户:catshadow6
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着通讯行业数据量的急剧膨胀,通讯运营商越来越重视数据的价值,对大数据技术的要求越来越高。很多公司都开始利用其资源优势,挖掘数据价值,开拓属于自己的核心业务。因为通讯业务种类繁多,系统繁杂,从而大数据平台的运维成本也日渐提高。由此可见一个高性能的,安全可拓展的,便于管理的大数据管理系统的运用将有助企业免受繁琐的系统运维之苦,特别是在通讯业务系统中,能够助力企业专注于自身业务的开发。本文首先对已有的数据管理系统进行调研,分析其优点和短板。针对其不太轻量,数据迁移的时效性不足,数据分析不够创新等问题,设计出一款比较高效的、方便易用的大数据管理平台。首先对大数据管理系统进行设计,根据大数据处理的流程,依托于通讯大数据平台架构,设计了接口采集、程序调度、数据聚合、平台告警、营销分析、可视化六个模块。管理系统主要在于数据的接入和数据的挖掘分析,所以本文的主要模块是程序调度、数据聚合和营销分析模块,而其他模块是基于企业原有的大数据管理系统做了少量改进。本文主要围绕程序调度、数据聚合存储和营销分析模块这三个模块做了相关研究工作。因为大数据平台对于数据的处理主要有生产环境和测试环境,除了生产环境的大数据集群,本文基于云计算容器技术创建业务测试环境,包括搭建相应的docker容器集群。接着设计并搭建了相应的调度模块架构流程,设计了相应的调度规则和相关调度信息字段表,并改进了数据聚合存储。程序调度模块设计得更加轻量化便于使用,数据迁移模块使数据迁移的时效性增加。在系统的营销分析模块中,我们在传统的通讯数据仓库的基础上进行TopN产品实时销量推荐,用大数据flink构建实时数据仓库业务应用情景进行销量分析,用深度学习DNN预测算法进行客户业务数据预测。并且利用相关通讯实验数据,对相应模块进行实验和测试,一系列测试验证了管理系统的有效性。
其他文献
<正> 结缔组织系由胚胎的间叶组织演变而来,发源于胚胎期中胚层,出生后成为人体的固有结缔组织、软骨及骨等。因此,凡上述组织发生的病变均可称结缔组织病。结缔组织病涉及范
分析了某新型战斗机全机疲劳试验中关于飞机支持的新要求新挑战,通过采用全新的支持设计形式、先进飞机支持加载与约束技术、约束点载荷数据分析方法,实现了新型战斗机全机疲
为进一步探讨与甲状腺机能亢进性心脏病(甲亢心)有关心电图改变的临床价值,本文对36例甲亢心住院病人心电图进行了分析,并与90例单纯甲亢病人心电图进行比较。
寰中绝胜,是人们对它的赞美;东南第一山,是人们给它的排位;"结草为荡,秋雁宿之",是它名字的由来。雄奇的山石峰峦,秀丽的泉瀑流水,共同造就了属于它独有的浑然天成的美。
COVID-19是由严重急性呼吸综合症冠状病毒2型引发的传染病,它最初病毒携带者是一些动物,传染源主要是COVID-19患者,无症状患者。传播方式主要是呼吸道飞沫近距离传播,接触传
每年12月6日至8日太阳到达黄经255。时为大雪,今年大雪为12月7日。《月令七十二候集解》:"大者盛也,至此而雪盛矣。"到了这个时段,雪往往下得大、范围也广,故名大雪。这时我国大
一个别样的台湾随着“两岸二通”以及自由行的日渐放开,身边经常有一些朋友或者同事去台湾旅游。他们中一些人,回来后会多少有些抱怨:台湾并没有想像中的那么“好”。
台湾,如明珠一般闪耀在东海之滨。在这片神奇的土地上,有阿里山,有日月潭;有时尚之都,有静谧小镇;有高山族人,有外省人;有邓丽君,有周杰伦;有《流星花园》,有《康熙来了》…
近年来,随着人们自我保护意识和法律意识的不断增强以及《医疗事故处理条理》的实施,护理纠纷不断增加,造成了护患关系紧张,甚至还影响了医院正常的医疗秩序,同时也严重影响责任人
目的:探讨十二指肠镜对40例晚期慢性胰腺炎(CP)的治疗。方法:40例内镜成功治疗慢性胰腺炎病人,内镜下、乳头切开、胰管取石、狭窄段扩张、支架置人,对病人腹痛、腹泻、胰管扩张、营