基于文本策略和SMCS的海量日志分析方法

来源 :计算机工程 | 被引量 : 0次 | 上传用户:shentong0312
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现有的海量日志统计分析方法速度慢,且对硬件配置的要求高。为此,提出一种基于文本策略和SMCS的海量日志分析方法。根据文件的软件设计策略,采用日志文件索引方法,将日志文件与日志时间关联,以加快日志提取。SMCS算法采用哈希表、文件归并、堆操作方法对海量日志进行统计分析和内存损耗控制。通过对真实软件进行对比实验,结果表明,该方法的分析速度比传统方法提高4倍。
其他文献
互联网金融的兴起和发展为解决中小企业融资难问题提供了新的办法。本文以众筹为例,研究众筹为中小企业融资提供的便利,包括融资渠道的拓宽,融资门槛的降低,融资效率的提高,
针对实际应用中移动Ad hoc网络节点可能存在身份差异的情况,提出一种非对等的移动Ad hoc网络密钥管理框架及一个密钥共享方案,该方案可以生成2类不同的主私钥共享份额,结合2
采用边界分区标识网络的思想,实现基于边界分区的自顶向下K端可靠度二叉决策图(BDD)构建算法。针对BDD构建过程中存在的节点冗余问题,提出无效边冗余消除和K点非连通冗余消除2
本文阐述了《聊斋志异》中的士人弃儒从商的概况及特点,分析了导致这一现象发生的原因,并从资本的来源、经营方式、商业利润的走向三个方面探讨这些士人出身的商人们经营的性
<正> 目前,国外的民用窄带调频电台普遍向小型化、低功耗、高集成方向发展,非常值得注意的是接收机的多功能集成电路和发射机的高频大功率功放组合集成电路,整机的水平直接取
针对无线传感器网络(WSN)节点的定位问题,提出一种基于差分演化的WSN节点定位算法。根据相邻节点间估计距离和测量距离之间的偏差构造目标函数,利用差分演化算法求出函数的最优解,达到最优解时的节点坐标即为未知节点的估计坐标。实验结果表明,该算法在锚节点比例为10%,节点无线通信半径R为1.8r的情况下,平均定位误差不超过5%,与带梯度搜索的半定规划定位算法相比,其定位精度更高。
近日,日本厚生劳动省医药食品局食品安全部监视安全课发布将加强对中国产乌龙茶和绿茶中苯胺灵的监控检查。将对其残留农药苯胺灵的监控检查频率提高到30%。苯胺灵是国内蔬菜
高级M序列具有良好的伪随机特性和安全特性,广泛应用于信息安全领域,如何快速有效生成高级M序列一直是研究的热点。在图论知识的基础上,给出一种新的M序列递归升级构造方法,
目的探讨经口内入路行下颌角、下颌体、颏区联合截骨的方法,达到面部轮廓整体缩小,V型脸成形术的疗效。方法采用口内入路,分别对双侧下颌角、下颌体行长弧形截骨术,对颏部行T
会议
针对高职院校学生顶岗实习质量监控体系中存在监控力度不足、质量评价不完善、监控范围狭窄、反馈问题落实难等问题,高职院校应坚持目标性、系统性、规范性、可操作性等原则,