【摘 要】
:
民航信息系统日志包含大量信息,但由于日志数据非结构化,不易被读取且数据量巨大,难以通过人工分析得出有价值信息。Hadoop分布式计算技术恰好可以很好地解决这个问题。设计
论文部分内容阅读
民航信息系统日志包含大量信息,但由于日志数据非结构化,不易被读取且数据量巨大,难以通过人工分析得出有价值信息。Hadoop分布式计算技术恰好可以很好地解决这个问题。设计了基于Hadoop的民航日志分析系统,系统结合数据挖掘领域经典的KNN分类算法,对算法进行了并行化改进,给出算法在Hadoop平台的MapReduce编程模型上的执行流程。对系统进行单机和集群测试,集群系统在处理较大规模数据时更高效。实验结果证明,系统具有较高的执行效率和可扩展性,对民航日志分析具有较高的实用价值。
其他文献
针对工业机器人末端轨迹测量精度不足问题,设计一套基于单目视觉的工业机器人末端轨迹测量系统。该测量系统以I-TEK TS4MCL-180M/C工业相机采集图像,以PC平台作为上位机,C++语言和OpenCV库编写测量程序,棋盘格靶标作为末端实时位姿测量靶标。当工业机器人运动时,测量系统能对固定于机器人末端的棋盘格标靶进行实时拍摄。通过Vulcan-CL PCIe采集卡实时读取和处理图像。利用该视觉测
目的探讨miR-5195-3p对Runx相关转录因子3(RUNX3)的靶向调节作用及对结直肠癌细胞凋亡的影响。方法 RT-qPCR和Western blot分别检测结直肠癌组织与癌旁组织中miR-5195-3p和RU
流媒体的出现在很大程度上影响了传统影视作品的制播模式,这些新媒体的出现为影视产业的发展注入了新的动力,也给传统影视行业带来了挑战。美国拥有世界上最成熟的影视作品产
住房和城乡建设事业是党和国家事业的重要组成部分,事关经济社会发展全局,事关人民群众切身利益。习近平总书记高度重视住房和城乡建设工作,多次作出重要指示批示,为住房和城
国土空间分区作为国土空间规划编制和自然资源统一管理的基础,对整个规划体系具有重要的支撑作用。在统一的国土空间规划体系下,用海分区既有其独立性与特殊性,也面临着陆海
目的提高本院静脉用药调配中心(PIVAS)工作效率,提升药学服务质量。方法分析本院PIVAS 2019年12月与临床科室沟通的电话咨询内容及原因,实施相应的改进措施,并与2020年5月(改进后)的结果进行对比。结果本院PIVAS电话咨询数量由改进前的2 865条/月下降为1 641条/月,下降率为42.72%。结论本研究改进措施可行,可有效提高本院PIVAS药师的工作效率。
我国科学技术水平的快速提升,不仅促进了国民经济的增长、优化了我国人民的生活条件,也必然对环境质量提出了更高的要求。基于这一现实情况,应在切实了解维护生态环境良好状
生物质作为一种可再生能源,来源广泛,具有替代化石燃料的应用前景。生物质快速热解制备生物油技术因具有周期短、成本低、效率高等优点,受到各界广泛关注。但是,热解制备的生
4月初.许多媒体披露了湖北汉川市政府下发的要求政府各部门完成一定的喝酒任务的文件。无独有偶,我最近也看到了一份类似的文件。
互联网技术和移动网络技术飞速发展的今天,电子商务和移动商务已经渗透到了生活的方方面面,电商平台上用户行为的分析已经变成企业进行消费者行为分析的关键内容之一。评论数