基于大数据的新能源汽车数据检测处理系统的设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:Sherryduandian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着车联网的快速发展,车辆行驶数据的信息挖掘也愈发重要。通过车辆网平台内的海量数据,对新能源汽车进行行为特征分析,挖掘汽车行驶数据背后的信息,不但可以加强国家对新能源汽车产业的监管力度和保障新能源汽车用户的合法权益,还可以通过这些数据信息观察全国各省市各地区新能源汽车分布情况以及行驶规律,了解国家新能源汽车行业的整体情况以及政策补贴数据,采集各个型号车辆蓄电池[9]产品情况以及全国新能源充电桩的分布情况,会对整个新能源汽车行业有详细的了解,从而对政府出台各项相关政策提供数据参考。对车辆制造销售企业而言,可以通过分析各个型号车辆状态数据,建立相关模型,预测电池[9]寿命,为提高产品质量提供数据支持。因此,基于新能源汽车的公共数据采集与分析研究具有重要的意义。本文主要的研究与工作内容如下:1.介绍并分析了系统采用的主要几种大数据技术,如分布式存储技术HDFS、大数据处理技术Spark等;2.研究新能源汽车行为特征分析模型中的两个关键问题:车辆里程核查及同一辆车装载多个数据终端的筛查辨别;3.对最终的新能源汽车数据检测处理系统进行需求分析,首先是系统数据分析所需数据来源及大致规模;其次,从大数据底层数据处理角度分析系统的功能和非功能性需求;4.对本系统进行整体架构设计,从物理架构和逻辑架构两个方面进行详细阐述,并且着重对底层业务需求中的三个模块进行完整的设计与实现,分别是里程核查模块、多终端数据筛查模块以及车辆异常数据统计模块。本系统对上传的车辆数据经过初步解析后,存储到Hadoop分布式文件系统中,同时采用Spark技术作为本系统架构的大数据计算模型,计算结果根据不同场景需要,存储到HBase和MySQL中供数据可视化使用。充分发挥Spark RDD和Spark SQL的高效数据处理方式,提高系统处理分析效率。
其他文献
为有效保障非洲猪瘟防控期间全市生猪产业健康持续发展,增强生猪养殖场(户)非洲猪瘟风险防控能力,按照四川省广元市委、市政府以及市非洲猪瘟防控应急指挥部相关要求,广元保
阐述了犊牛腹泻的病因、致病机理、样品的采集、实验室诊断方法与防控措施,以期对犊牛腹泻的防控以及犊牛生产有指导意义。
  目的:临床观察瑶药“驱风壮骨止痛汤”对风湿痛症的疗效;方法:用“驱风壮骨止痛汤”内服汤剂及酒浸剂治疗121例,加用局部外敷和灸治并用稻杆灰胶囊治疗175例;结果:内服汤剂及酒
广西富川瑶族自治县福利镇一种鸭养殖场养殖的北京种鸭,2017年秋天雨季后的几个月来连续多次鸭群陆续出现产蛋率下降,厌食、精神不振,下痢、肛门周围羽毛沾有稀粪,后期腹部膨
本药液是根据藏医经典著作《四部医典》所记载的余甘子方剂的基础上,结合现代人的生活习惯、饮食规律的变化,补充了藏红花、冬虫夏草等10多种纯天然药材,采用传统的制剂方法和现
近年来蒙医药治疗慢性肾衰竭(Ctwonic renal failure,cRF)研究目趋增多和深入。本文对近年来蒙医药治疗慢性肾衰竭的蒙药单方剂、蒙药复方荆的临床应用及蒙西医结合治疗方面的进
目的:观察蒙医温针对黑脉型颈椎痛患者椎-基底动脉血流动力学指标的影响。方法:治疗组50例采用蒙医温针治疗。对照组50例采用中医钟刺治疗。所有恚者均在治疗前后行经颅彩色多
分析了目前养猪场废水处理现状,并总结了两点常见的废水处理方法以及再利用途径,旨在为猪场废水的科学处理和再利用提供参考意见。
每户贫困户每批养殖30只绿壳蛋鸡(乌鸡),为其每年免费提供半年饲料,并由养殖专家提供技术指导;一只鸡一年产200多枚绿壳蛋,绿壳蛋以每枚3~4元的价格搭上互联网的快车销往全国各
通过膜下滴灌田间试验,研究了塔里木灌区棉田土壤盐分运移特征。结果表明:膜下滴灌的棉田土壤盐分呈“Y”状垂直分布,膜下土壤盐分含量小于膜间,膜间土壤盐分从表层到深层呈逐渐