基于通信运营商数据的大数据实时流处理系统

来源 :中国新通信 | 被引量 : 0次 | 上传用户:clarain
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文利用流式数据处理框架探索了一种新的基于运营商实时大数据业务系统构建模式。首先,在充分研究了业内实时流式处理技术的发展以及运营商本身实时数据源的特点之后,确定以Flume作为实时采集和分流组件,Kafka作为缓存和多模块通信组件,以Spark Streaming的分布式结构作为数据ETL集群;然后,利用该系统进行了重点区域的人流实时监控的业务,在实施过程中为了提供毫秒级的数据结果流查询能力,采用了Redis组件提供基于内存的Key-Value引擎;最终,通过流式数据处理效率的对比和实时监控的人流效果,我
其他文献
在高职计算机网络技术专业构建相对稳定的"双证融通、工学结合"人才培养模式,关键是构建科学的人才培养标准,建立体现双证融通的课程体系和教学模式,建设高水平实训基地和一支
目的评价腔镜甲状腺切除术的临床应用价值.方法复习近几年有关国内外文献,阐述腔镜甲状腺切除术的手术径路、手术操作空间的维持、手术操作的关键技术、手术优缺点、手术并发
本项实验依据中医肾虚-骨质疏松-髓海(脑)不足的理论,通过建立肾虚骨质疏松症大鼠动物模型,应用补肾中药密骨灵实验组和各对照组灌胃治疗,检测大鼠下丘脑5-羟色胺(5-HT)、5-
本文探讨了陆维钊先生的书法艺术观与教育观。论文指出,陆维钊先生对书法艺术的本体性意义和功能性意义有明晰的分辨,并分别对此二者做出了系统的论述;在书法教育方面,陆维钊先生
地方性震级ML和面波震级MS是两种常用的震级标度,二者经常需要依据经验公式进行相互转换.基于历史地震整体统计的经验公式由于资料有限,且没有考虑区域地质条件的差异,在实际
应用中国大陆地区地震活动的地震学参数(如大震烈度图、综合等震线、余震分布、震源尺度、地震矩、地震应变、能量、震源机制解和震中分布等, 通过综合集成, 刻画了我国陆区
“运筹帷幄”是军事用语,引申于数学,亦能获“决胜千里”之效。自主开放的课堂亦如变幻莫测的战场,教师必须善于运筹,才能游刃有余。
目的评价新型解剖型钛笼(AA-TMC)在单节段及双节段颈前路椎体次全切植骨融合术(ACCF)中与终板的贴合程度以及对手术节段颈椎生理序列的重建效果。方法使用12具颈椎尸体标本完
针对一般航天器动力学姿态控制问题,提出了一种二阶线性自抗扰控制方法.该控制方法对航天器系统中存在的不确定性及外界干扰具有很强的抑制能力,且具有比较简单的结构,解决了
研制了一种多效透明磨削液,它具有良好的润滑、清洗、冷却和防锈性能,且不含亚硝酸盐及甲醛等有毒物质. Developed a multi-effect transparent grinding fluid, which has goo