对于大规模系统日志的日志模式提炼算法的优化

来源 :计算机工程与科学 | 被引量 : 0次 | 上传用户:tomjack110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
LARGE框架是部署在中国科学院超级计算环境中的日志分析系统,通过日志收集、集中分析、结果反馈等步骤对环境中的各种日志文件进行监控和分析。在对环境中系统日志的监控过程中,系统维护人员需要通过日志模式提炼算法将大量的过往系统日志记录缩减为少量的日志模式集合。然而随着日志规模的增长以及messages日志文件的特殊性,原有的日志模式提炼算法已经难以满足对大规模日志快速处理的需要。介绍了一种对于日志模式提炼算法的优化方法,通过引入MapReduce机制实现在存在多个日志输入文件的情况下对日志处理和模式提炼的流程
其他文献
基于四川省2000-2015年人口数据,利用Arc GIS空间统计法,每隔5年选取典型年份,分析四川省人口密度的时空变化特征,探讨其变化的主要影响因素。得出结论:2005-2010年人口密度空
栏目是教材的基本功能单位。教材由一个个单元构成,每个单元又由正文和栏目构成。不同的栏目具有不同的功能,它们按照一定的顺序和编排方式构成教材的基本体例。因此,栏目的
目的:观察针灸配合推拿按摩治疗腰椎间盘突出症的临床疗效。方法:以100例腰椎间盘突出症患者为研究对象,随机分为2组各50例。治疗组采用针灸配合推拿按摩治疗,对照组采用常规
综述了生物质基平台分子5-羟甲基糠醛及乙酰丙酸转化制备多种化学品的研究进展,主要包括5-羟甲基糠醛转化为2,5-呋喃二甲酸、2,5-呋喃二甲醛、2,5-二甲基呋喃的过程以及乙酰
通过梳理对话教学中师生言说与倾听关系的演变历程,揭示传统课堂中二者可能存在的对抗形式。为了构建真正意义上“倾听着”的课堂对话活动,促进师生对话的和谐共生,在进一步厘清
培养学生的语文应用能力,促进职业能力综合发展意义重大,提高中职学生的语文审美能力,教师在教学中必须有针对性的对学生的审美素养进行培养,帮助学生形成良好的个性和人格,
目的:评价3种新型镍钛根管预备系统TFA、Reciproc及ProTaper Next的根管清洁能力及根尖推出量的差异。方法:将40个人类单根管前磨牙随机分为4组(n=10),分别用K锉(A组)、TFA(B组)、Rec
在深基坑支护工程中,采用内支撑系统的支护结构,施工到某些特定阶段会根据不同的施工条件的需求对内支撑系统进行拆除。为了保证支撑系统的稳定,在内支撑系统拆除前,需要在竖
隔离措施的实施直接影响着行政相对人的人身权和财产权,应该受到法律的严格规制。医疗机构作为隔离措施中的行政授权组织与患者存在医患强制法律关系和医患合同法律关系,不同
目的探讨三维适形(3DCRT)放疗用于高龄食管癌患者的短期疗效及长期预后。方法回顾性分析经胃镜病理与食管X线检测确诊的高龄(75岁以上)食管癌患者80例临床资料,所有患者均行3