现有的云计算平台中,由于系统组织庞大、架构复杂,各个节点和组件所产生的日志数据量巨大且分散在不同节点中,存在着日志数据的格式多样、数据交换困难、数据的存储和检索困难、日志数据的读取效率低等问题,导致大量的日志数据信息无法被充分地挖掘利用。本文正是针对上述问题,围绕云计算环境下的实时日志分析展开了研究。本文的主要贡献有：(1)针对云平台复杂的物理架构和逻辑架构,基于分布式系统,结合实时流数据收集、海量数据的存储和索引、实时数据分析计算等功能模块,设计了一套完整的、可扩展的云计算环境下的实时日志分析系统。该系统能够帮助系统运维人员高效地检索整个系统中的日志记录,有效地管理各种日志数据,并通过日志数据快速了解当前系统的运行状态和服务状态。(2)该系统能够从海量且多样的日志数据中,实时地挖掘出数据所蕴含的信息,一方面对系统的实时运行状态进行分析,另一方面,通过使用机器学习的算法和模型,实现了对于系统未来可能发生的故障的预测。(3)系统提供了友好的展示界面对数据进行了可视化处理,生动地将系统中的数据及其所蕴含的信息展示出来,提高了数据分析工作的效率。