基于HBase与HDFS的防汛抗洪空间数据存储设计及应用

来源 :长江信息通信 | 被引量 : 0次 | 上传用户:a15813225802
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
洪灾数据类型多样、结构复杂、数据量巨大,随着时间累积给传统平台带来巨大压力.针对这个问题,通过结合大数据处理技术,将洪灾数据存储到云平台中,提高洪灾数据查询效率.根据洪灾数据的特征,将类型和种类进行分类,并通过HBase与HDFS相结合对洪灾数据存储进行设计.最终实现了洪灾数据的分布式存储、查询与管理,通过设计索引,提高了洪灾数据的查询效率和速度.应用结果表明,随着数据增长,研究设计的存储方案查询时间逐渐接近并小于传统平台的查询时间,能够提高洪灾数据利用效率.
其他文献
智慧校园是以物联网为基础,将校园工作、学习和生活一体化的网络服务系统.随着校园信息化程度越来越高,随之而来的网络安全问题也日渐突出.校园网络一旦被非法入侵,将会有严重的信息泄露风险,因此构建一个安全、可靠的智慧校园网络成为人们关注中的重点.校园网络的可靠性需要一个全面有效的评价指标,传统的评价指标(如贝叶斯网络)比较依赖于主观经验、且精度较低.而文中利用神经网络强大的非线性拟合能力,提出基于神经网络的智慧校园网络安全评估方法.通过将量化的评价指标进行仿真训练得到一组泛化能力强的评价结果,最终得到一组适用性
随着科技的发展,蓝牙技术已经进入更高的领域.基于蓝牙4.0的数据传输方法依靠目前广泛使用的安卓智能移动客户端的大平台,可以更有效地提高数据传输的效率,传输方式稳定安全.基于蓝牙4.0低功耗技术设计水下生物无线探测系统,将手机应用与硬件结合,数据传输稳定可靠,显示界面更清晰、美观,扩大使用人群,结合相关APP可以广泛地应用于各类电子设备的无线通信,交互界面友善,方便快捷.但影响其数据传输的制约因素有很多,解决这些因素能够有更好地发挥其作用.
在雾霾等特殊气象条件下,在室外拍摄到的图像质量将会存在不同程度的降低,这不仅仅影响到户外摄影,道路监控等工作的开展,更可能对公共交通以及无人驾驶等造成安全隐患。本综述将会讨论在几种常规的基于图像增强去雾算法的基础上,探究基于图像复原的去雾算法以及近年来新兴的基于深度学习的去雾算法与传统技术的原理差别及利弊分析。
近年来北斗卫星导航信号被干扰的事件时有发生,如何快速发现卫星导航干扰源,确定其具体位置或来波方向,进而制止干扰信号的继续播发,将净化北斗电磁空间,助力北斗的推广应用.文章提出了一种基于北斗阵列信号DOA估计与信号到达时差测量的方法,相较于传统的多天线阵列360度信号监测方法,不但能够发现热噪声以上的强干扰信号,也能发现热噪声以下的微弱干扰信号;对于转发式干扰信号,还能确定其具体的三维坐标,提高了干扰源的查找效率.实验结果表明,在城市一般使用环境下,采用阵列信号检测方法的干扰源监测装置,可有效发现干信比小于
在时间窗与载货量约束下,以局部区域物流配送成本为目标,建立物流配送成本最小路径规划数学模型,针对该模型,在果蝇优化算法中,引入模拟退火机制、邻域搜索策略,建立适合于物流配送成本路径最小化问题的混合果蝇优化算法,在果蝇优化算法框架下引入遗传算法和模拟退火算法(Hybrid Fly Fruit Optimization Algorithm,HFFOA).在比较性的数值实验显示,对于求解小规模物流配送问题,搜索效率高,获得的物流配送方案具有明显优势.
针对复杂背景下颜色相似背景的干扰、目标非刚性形变和遮挡等问题,提出了一种基于自适应特征和混合预测算法的目标跟踪算法。首先用图像块建模法检测目标,依据掩膜结构修补断桥得到较完整的目标;接着提取目标的色度直方图信息和纹理特征,进行自适应特征融合;依遮挡情况调整预测算法,结合自适应特征预测跟踪目标。实验结果表明,该算法能有效抑制噪声,消除相似背景的干扰,对目标遮挡和非刚性形变具有一定的鲁棒性。
容灾系统主要优点在于其具有存储集中化、管理集中化、互操作性强.介绍了某地空管局异地容灾NCE-T网管改造总体方案;在不同地点建立备份系统,利用NCE网管等系统,将本地的数据实时备份到异地服务器中,实现数据远程恢复、异地数据备份、回退等功能.升级改造成本较低、可扩展性能好,应用前景较为广阔.
随着数据化时代的快速发展,我国进入了信息化时代.在大数据时代.我国的各个领域都融入了大数据、云计算等新兴技术,这样能够将工作效率提升.会计大数据平台是以云计算技术为核心的数据信息平台,能够很好的解决财务中的种种问题,如:财务综合分析、决策、输出等,且这个平台的构建还能保证其安全性.文章就针对基于云计算技术的会计大数据平台构建进行分析探讨.
随着科学技术的快速发展,发电厂内部的正常运行起到了不可替代的作用.但发电厂单元机组内部存在一定的危险点,危险点被触发,会导致一系列安全事故,对发电厂造成重大威胁,影响电力的正常提供.传统的发电厂集控运行危险点预控中,预控方式无法拓展监测范围,安全事故发生率较高,因此,发电厂单元机组集控运行危险点预控,是当下发电厂发展中的一个重要问题.通过检测集控运行危险点,对危险点的特性进行分析,构建了设备全寿命周期管理,计算出危险点的数据值,根据危险点动态控制因素,优化危险点动态控制.实验结果表明,发电厂单元机组集控运
借助无线传感网(WSN:Wireless Sensor Network)技术对目标优质区域空气各指标感知量化后成形成独立的优质区域空气模型,并上传云端形成健康空气云数据库。设计基于MQTT通信协议的物联网室内空气再造系统,通过WIFI网络连接健康空气云后台,获取优质区域的空气模型数据;主控模块通过Zigbee通信组网模块将室内的空气净化器、新风机、空调、空气检测仪等设备组成互联互通的控制系统,根据