一种流数据实时写入保障下的数据查询方法

来源 :计算机应用研究 | 被引量 : 11次 | 上传用户:ares_ding
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
各类流式传感数据的实时接收与处理是物联网智能应用的基本要求。针对某城市车辆实时监管系统暴露出的数据实时接收与高效数据查询互相制约的问题,提出一种适用于物联网数据管理的结构化数据查询优化方法,在保障流数据实时写入的同时提供高效的数据查询能力。该方法采用数据库集群应对数据并发访问时的性能需求;通过主从延迟复制技术减少数据查询对数据写入性能的影响;采用数据分区和数据缓存技术提升单数据节点的查询性能。实验结果表明,该方法能在一定程度上减少查询对数据写入的影响,提高数据的查询效率。
其他文献
为解决基于闪存的固态盘寿命有限及随容量被消耗可靠性也逐渐衰减的特性,基于两个重要的观察结果:a)存在大量的重复数据块;b)元数据块比数据块被更加频繁地访问或修改,但每次更新仅有微小变化,提出了flash saver,耦合EXT2/3文件系统,结合重复数据删除和增量编码来减少到SSD的写流量。Flash saver将重复数据删除用于文件系统数据块,将增量编码用于文件系统元数据块。实验结果表明,fla
在结合Holt等人的隐藏证书、IBE算法以及秘密共享这些方案的基础上,设计了一种新的匿名验证隐藏证书方案,在认证过程中可以保护用户的身份信息以及证书中的敏感信息,并且最后给出了一个医学方面的应用场景。分析证明:本方案能够避免攻击者通过收集用户的网络行为信息、利用数据分析等手段获取用户的敏感信息,因此该方案是安全有效的,能够更好地保护用户的隐私。
针对现有形状匹配算法匹配速度慢、可靠性差的问题,提出了一种基于轮廓矢量化的形状匹配算法。将轮廓曲线点集离散化,使用多组向量对轮廓线性进行逼近。匹配时,结合线段在几何中的匹配方法,通过加权求和,计算源图像与目标图像中每组对应向量的相似度,将它们的平均值作为匹配结果。以焊盘表面轮廓为实验对象,使用所提出的算法进行匹配,结果表明,通过正确选取向量组数能有效避免匹配精度所受的影响,算法对不同类型的焊盘区分
针对经典相位相关匹配算法(POC algorithm)因计算量过大不适合应用在高分辨率稠密匹配场合的问题,提出了一种新型的相位相关稠密匹配算法。在稠密匹配策略基础上将对极几何约束引入相位相关函数,实现二维函数拟合到一维函数拟合的转变,达到了在保持匹配精度的同时大幅缩短算法运行时间的目的。实验表明,本算法在匹配精度和算法运行时间上都优于采用相似匹配策略的基于灰度的匹配算法,具有很强的实用性。
针对卫星通信网络的链路建立问题进行研究,提出了一种GEO-LEO主从式星状网的链路建立方案。该方案采用基于TDMA多址协议的链路建立方法,对多址协议进行选择,设计了多址协议的格式以及链路建立体系结构,并给出了链路建立的组网过程,最后对链路建立方案进行了性能分析。通过对多普勒频移、时隙同步、链路建立时间等问题进行分析与仿真,结果表明对GEO-LEO主从式星状网的链路建立的工程实现具有重要参考意义。
针对传统的主题爬虫对网页信息缺乏在知识层面上的处理和理解的问题进行了研究,提出了一种面向增量同生主题的维吾尔文爬虫,通过建立一个增量主题词库优化传统的主题模型,来描述
在分布式视频编码中关键帧间的时间相关性没有被利用,据此提出一种基于频带划分的关键帧编码模式的选择方法。关键帧经过DCT后得到的系数带划分为低频带和高频带,低频带部分采用Wyner-Ziv编解码,然后对高频带进一步进行编码模式的选择,分别进行Wyner-Ziv编解码和传统的帧内编解码,且在解码端完成编码模式的选择,通过反馈信道向编码端传送编码模式的选择。仿真结果表明,在不增加编码端复杂度的情况下,所
提出了一种基于四叉树K-均值聚类算法的软件故障预测算法。采用四叉树的目的包括利用四叉树寻找K-均值聚类算法所需要的聚类中心和利用四叉树来进行软件模块的故障预测。在这种算法中,输入门限参数决定了最初的聚类中心,通过改变门限参数,用户可以得到期望的聚类中心。采用了聚类收益这个新的标准来衡量算法的性能。通过仿真和比较,算法具有最高的聚类收益,且在大多数情况下,总体错误率比其他算法更低,从而表明了算法在软
为突破数据不平衡对算法的限制,更好地将子群发现技术应用到数据不平衡领域,设计了一个适合入侵检测数据集与子群发现算法的数据简化策略。实例简化阶段,应用均匀分布随机点定理与数据空间稀疏度构造属性相异度函数,借鉴稀有类信息仿制技术并结合进化学习实例选择算法提出稀有类拓展实例选择算法;属性简化阶段,采用主成分分析法,针对数据集特点保留相关兴趣特征以提高算法发现效率。实验证明,此方法适用于子群发现算法,能有
分析彩色图像的位平面特点,提出一种基于空间域的彩色图像自适应大容量信息隐藏算法。对彩色图像的R、G、B分量分别进行位平面分解,将较高位平面分块后,按照规则在其黑白边缘嵌入数据,较低位平面则基于亮度掩蔽效应,根据像素点的亮度不同来嵌入不同量的数据,从而在确保图像不可感知性的前提下,最大限度地利用可利用的隐藏空间。实验表明,该算法具有较大的嵌入容量和较高的峰值性噪比。