基于Storm的实时海量轨迹数据查询系统设计

来源 :计算机与数字工程 | 被引量 : 0次 | 上传用户:m123987679
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据环境下,互联网及其它行业领域中时刻都在涌现出海量数据并快速增长,传统的查询系统框架存在着数据量增大时无法满足用户实时查询的需求。提出了一种基于Storm的海量轨迹数据实时查询系统设计方法,采用分布式实时计算系统Storm平台对实时海量轨迹进行处理,利用CQL语句对数据流实时查询,对于轨迹数据量较大情况下引起的系统利用率问题,采用动态负载均衡算法对本查询系统进行负载均衡,针对数据量过大超出系统处理上限的问题,设计了一种过载处理方法。通过具体业务数据对该系统进行性能测试,测试结果表明实时查询系统所面临的负载均衡问题得到了有效的改善,系统的实时性得到了明显的提高,能够满足海量轨迹数据的实时查询需求。
其他文献
阳光家园是中国政府出资兴建的对艾滋病致孤儿童的集中供养福利机构。这种集中供养模式有一定的成效,使得艾滋孤儿们孤有所养、幼有所教、病有所医。但同时也存在着众多弊端:
<正>近日,农业农村部召开新闻发布会,介绍《关于实施家庭农场培育计划的指导意见》的主要内容。并着重阐释了加快培育家庭农场的五大原则。据了解,截至2018年底,进入到农业农
摘要:移动通信产业的高速发展与激烈的市场竞争是促成移动运营商不断改进运营质量的重要动力,各大运营商为了提高自身运营质量做了大量的网络资源优化工作。如何全面的对网络
当前我国企业对外面临着日趋激烈的市场竞争,对内面临着企业扩张后生产管理方式的落后。提高管理水平适应市场的需求成为我国企业迫在眉捷的问题。越来越多的企业意识到ERP系
项目评估研究是在投资决策之前对拟建项目进行全面技术经济分析的科学论证,为投资决策提供科学依据。本文重点是对TB项目的项目对环境的影响、节能综合分析和财务、经济及社
改革开放30年来,北京作协大胆改革专业作家体制,在全国率先打破作家终身制,并形成了相对稳定的四种合同制作家模式。北京作协在作家人事制度方面作的有益探索,不仅促进了北京
国务院出台《全国农业现代化规划(2016-2020年)》,鼓励发展适度规模经营,提高机械化水平、生产效率和农民收入。农场主一跃成为前景广阔的新职业。家庭农场创办热潮在宜兴蓬勃兴
作为我国研究生教育改革的必然趋势,研究生课程教学模式正在向多样化与科学化发展,其中新型多媒体技术教学革新是发展的主流方向。虚拟仿真技术,作为一种新型的智能化科技,通
随着社会经济的高速发展,科学发展观的不断深化与推进,人民生活水平不断提高,旅游业也随之蓬勃发展,人们对旅游过程中的精神文化内涵和环境有了更高层次的要求。良好的公路景
工资、监督与职业发展是三种主要的激励因素。在公共部门工资激励有限的情况下,职业发展的激励作用最为显著。在霍尔姆斯特罗姆(H olm strom )和梯罗尔(Tirole)的职业发展激