基于Hadoop的城市公共交通大数据时空分析

来源 :北京建筑大学 | 被引量 : 4次 | 上传用户:guoguo10
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
城市公共交通大数据蕴含着丰富的时空信息,是进行乘客出行特征分析、城市交通服务能力评价以及公共客流预测的数据基础,是城市公共交通科学管理和规划设计的重要依据。随着城市交通的快速发展,城市管理部门积累了体量超大的交通数据,然而这些数据并不能得到充分利用,因为传统的交通数据分析软件无法对大数据进行加载、处理和分析,所以一般采用从大数据中抽取数据的方法,样本量较小,并且分析结果大多以二维图表为主,数据可视化效果一般。为此,本文以北京市公交车刷卡数据和出租车GPS轨迹数据为研究对象,主要进行了以下几个方面的研究工作:(1)搭建Hadoop分布式计算平台。利用实验室八台电脑搭建微型分布式集群,将30天公交车刷卡数据和7天出租车GPS轨迹数据进行分布式存储,并利用MapReduce编程模型进行数据清洗、预处理和数据挖掘。(2)构建公交车乘客出行链和交通工具客流模型。研究建立基于时空约束的公交车乘客出行链、基于公交站点的公交车客流模型和基于车辆状态的出租车客流模型。基于上述模型完成公交车换乘数据、公交车客流数据、出租车客流数据的提取和计算。(3)城市公共交通大数据时空分析。根据不同种类交通工具的运营特性和乘客出行特点,设计并实现了包含公交线路运营分析、交通枢纽客流分析和识别乘客职住地在内的多种城市公共交通大数据分析方法,并从出行时间、出行热点和出行时长三个方面进行了不同种类交通工具乘客出行特征的差异性分析。(4)基于WebGIS的数据可视化。为充分展示交通大数据的时空特性,通过整合在线地图服务、二维空间数据和三维模型数据,并采用热力图、三维柱状图、交互式地图和非空间地理图表等多种表达方式进行交通大数据分析计算结果的可视化。(5)在技术上整合WebGIS和Hadoop分布式计算平台。充分利用WebGIS丰富的表达手段和Hadoop分布式存储计算的优势,实现从客户端发布数据请求、Hadoop集群分布式计算到利用WebGIS进行数据可视化的闭环流程作业。本文通过搭建Hadoop分布式计算平台进行交通大数据挖掘,为全方位、多角度的对城市公共交通大数据进行分析计算打下坚实的基础,并建立基于WebGIS的可视化系统进行数据计算结果的可视化分析,为人们带来更加直观的视觉体验,有利于发现可视化隐含的规律,并将WebGIS架构与Hadoop进行整合,减少人工中途干预,从而解决了大数据集中调用显示的难题。
其他文献
随着科学技术的发展和人类生活水平的提高,汽车已经成为普通家庭的代步工具,但汽车所用动力原料汽油和柴油的燃烧释放大量的有害气体污染环境。其中燃油释放的硫化物是环境污染的主要来源。硫化物燃烧释放的酸性气体,造成环境污染,危害人类的健康,腐蚀设备。因此降低燃料油中硫化物是非常必要的。负载低共熔溶剂型催化剂具有不需要添加萃取剂,活性成分分散均匀,催化活性高,便于分离和回收。因此将它作为氧化脱硫的催化剂,能
随着近些年网络技术的迅速发展,云计算的技术应用也愈来愈广泛,云计算技术在给人们带来工作和生活的方便同时,也存在着相应的安全问题,对人们的信息财产带来很大安全威胁。本
采用基于密度泛函理论的第一性原理研究聚苯并噻吩的电子结构,并与聚苯硫醚比较,结果表明两者的能带结构及态密度相似,硫原子主要在价带底区域和导带顶的一些局域性强的能带
目的:探讨健康教育对经皮冠状动脉介入治疗术前访视中的影响。方法:100例行PCI患者予术前访视,健康教育,心理护理等,观察术后效果。结果:患者焦虑情绪减缓,应对能力提高,术后并发症明
目的:对带锁谴内钉治疗下肢长骨复杂骨折的疗效进行分析。方法:选择我院收治的42例下肢长骨骨折患者,通过带锁髓内钉对下肢长骨复杂骨折进行治疗。结果;通过随访,40例患者的骨折愈
<正>一、选题背景1、现实背景在近十年的高校英语教学经历中,我注意到学生们虽在相同的环境中学习,但英语成绩却差异很大,对部分学生而言,英语已然成为了他们的一块儿心病,多
会议
强震的孕育、发生涉及大尺度的地壳运动和构造形变的分布.中国大陆西部现今构造形变强烈,一些强烈活动的深大断裂的分布,把地壳分割成了若干活动地块.GPS观测获得的大范围的
期刊
<正>目的定量评估不同体质指数(BMI)老年人在行走状态下的动态平衡能力,从运动学角度揭示肥胖因素对动态平衡能力的影响。方法 53位不同BMI的老年人参加了本次实验。基于三
会议
临床上老年人脑血管病所致的半侧舞蹈症比较少见.我科1999年1月~2008年1月共收治的26例,为抛砖引玉,现分析报导如下:
负泊松比材料在工程领域有着十分普遍的应用场景,比如生物医学工程、航空航天工程和汽车工程等,受到了研究者们的广泛关注,许多具有可控力学响应的人造负泊松比材料设计策略