论文部分内容阅读
开展农民现代远程教育是提升农村信息化水平、消除数字鸿沟的一项重要战略部署,农民远程教育大数据分析对进一步提升远程教育服务水平和服务能力具有重要意义。本文基于农民远程教育平台十余年积累的数据基础,通过数据采集和集成将用户学用数据和平台资源数据进行梳理、汇聚和规范化处理,建立起一套统一的数据管理系统。构建了远程教育数据统计分析、表示及综合评估模型库。应用Hadoop和Spark大数据分析技术实现了数据的HQL及其Spark SQL查询分析。通过软件工程技术及数据库开发技术实现了大数据可视化分析与管理系统,实现