互联网行业的迅猛发展给各行各业带来了新的机遇,零售行业如超市、水果、生鲜等也都受到了非常大的冲击,零售行业的电商化成为了新的潮流。商家经营数据分析平台从商家的经营场景出发,通过平台让商家了解到门店的经营现状、经营波动、经营问题以及同行竞对商家的经营对比情况等数据,从而进行经营决策。论文在调研了相关背景并结合需求特性进行分析后,基于通用大数据解决方案设计和实现了商家经营数据分析平台,完成了平台的数据收集、数据预处理、数据计算、数据分析与展示和数据报表管理等功能的全流程设计。平台整体采用前后端分离的开发模式,前后端通过HTTP请求进行交互,后端选用HBase和Mysql完成数据存储,前端基于Vue框架和Boots组件库完成多种类型数据可视化。平台通过开源的Canal和Flume对日志进行实时收集,数据收集到Kafka队列后通过Camus完成离线数据同步到Hive数据仓库的操作;数据预处理部分采用业务规则与分类算法结合的方式强化数据可用性,保证数据质量;数据计算部分将离线数据和实时数据分离计算,选择基于Spark引擎计算离线数据、基于Flink数据平台计算实时数据;数据分析与展示部分通过Spring三层架构完成请求的接收、处理和反馈;数据报表管理部分通过异步方式管理任务,利用CSVWriter工具生成数据报表。项目整体研发周期严格遵循了软件工程方法论,本人深度参与了平台的需求分析,完成了平台的架构设计、数据设计和功能模块设计开发等工作。最后,根据测试目标对平台进行了全面的功能性测试和非功能性测试,证明了系统的可用性和可靠性。目前,商家经营数据分析平台已经全面上线使用,使用期间系统功能稳定,为商家输出了正确、合理的数据分析结果,总体功能和性能达到了预期效果,也获得了商家用户的一致好评。