【摘 要】
:
随着无线通信技术与移动互联网的发展,移动设备在人们的生产生活中逐渐普及。在这样的情况下,人们通过移动设备与基站进行信令交换、使用设备进行Gps定位会产生大量的位置类数据。在一些特殊领域中,对于位置类数据进行数据挖掘与构建分析模型的应用系统的需求急剧上升。但是对位置类数据的挖掘与分析有数据类型繁杂、数据量庞大、数据准确性不稳定、数据模型难以构建以及应用系统对分析结果的可视化展示问题和用户的可视化交互
论文部分内容阅读
随着无线通信技术与移动互联网的发展,移动设备在人们的生产生活中逐渐普及。在这样的情况下,人们通过移动设备与基站进行信令交换、使用设备进行Gps定位会产生大量的位置类数据。在一些特殊领域中,对于位置类数据进行数据挖掘与构建分析模型的应用系统的需求急剧上升。但是对位置类数据的挖掘与分析有数据类型繁杂、数据量庞大、数据准确性不稳定、数据模型难以构建以及应用系统对分析结果的可视化展示问题和用户的可视化交互问题等难点。本文提出的时空分析系统是基于大量基站信令数据,结合数据挖掘和大数据处理技术,构建轨迹伴随分析和时空碰撞分析两大位置类分析模型,并为用户提供高效、准确、可视化的位置类数据分析手段。本文对时空分析系统的设计与实现做相关论述。时空分析系统整体采用分层架构设计思想,分为数据层、数据访问层、业务逻辑层和应用层。数据层是基于Hadoop框架构建的分布式系统,用于海量位置类数据的接入、清洗、格式标准化、位置纠正、存储与处理。数据访问层对数据层的数据访问方式、存储和结构透明化,对上层以服务的方式提供对业务逻辑数据的访问和分布式运算资源的调用。业务逻辑层主要涉及轨迹伴随分析和时空碰撞分析模型的实现。其中轨迹伴随分析模型为:对用户输入目标或者轨迹,在全量数据中符合输入伴随模式的目标集合,并按照相似程度输出;时空碰撞分析模型为:对于用户输入的空间和时间组合条件,分析出符合输入时空条件的目标结果集合,并且根据条件的符合程度顺序输出。两个分析模型舍弃传统以二维经纬度作为位置建模方式,采用一维化的geohash编码作为位置特征表现方式,解决位置类数据存储和查询的难点,在运算性能和准确性上有更优秀的表现。应用层采用web应用的方式和ArcGIS服务为用户提供灵活、动态、丰富的数据可视化和地图交互功能。本文所设计与实现的时空分析系统已经在特殊领域的信息化建设起到重要作用。本文从特殊领域对位置类数据挖掘需求的现状出发,对时空分析系统的整体架构和各层模块设计和实现进行相关论述,并阐述轨迹伴随分析和时空碰撞分析两个核心算法模型的的实现,最后设计并进行了对模型算法有效性的测试和整体系统的性能测试。本文期望在对相关领域下的数据挖掘系统设计和建设以及算法模型的设计起到参考和帮助。
其他文献
近些年来,车联网作为智能交通系统的重要架构基础,在车载导航、车载娱乐、车辆数据统计与分析等方面发挥了巨大作用,车联网的发展也直接影响着智能交通系统的研究方向,其中数据传输安全作为车联网中的重要部分受到研究人员持续的关注。尽管研究人员针对车联网环境提出了相关的数据隐私保护方案,但由于车联网中车辆具有高速移动性,并且其自身计算、存储及通信能力有限,使得现有方案无法完全满足车联网环境下的需求。首先,已有
无人机蜂群通过传感器融合、云资源虚拟化等技术整合群体资源,完成复杂多样的任务。大规模无人机蜂群在复杂网络环境下具有群集可信和容错需求。由于重部署困难和诊断实时性要求,无人机蜂群需要实现对故障或非完整性节点的高效溯源。针对以上需求,本文从高效群集可信证明和非完整节点溯源方面开展研究,具体研究内容如下:(1)针对传统远程可信证明架构在蜂群场景下存在的验证效率低且无法准确溯源的问题,本文提出一种基于边缘
随着通信技术的不断发展,物联网得到了广泛的接受和普及。从可穿戴设备、智能家居到智能汽车,这些设备不断地收集、处理和共享数据,给人们的生活带来便利的同时,也给个人隐私带来极大的风险和挑战。物联网设备中通常包含大量的敏感数据,如果不对这些数据提供可靠的保护,一旦泄露会给用户带来巨大的损失。因此,研究物联网中访问控制机制,防止未经授权的访问,成为了物联网安全和隐私保护的重要研究内容之一。然而传统的访问控
进入21世纪以来,互联网与无线通信技术的快速发展让人类迈入了万物互联的新时代。由于无线射频识别(RFID)技术通过非接触的方式就能达到识别物体的目的,所以成为了物联网(Io T)的重要组成部分。近几年RFID系统开始逐渐被应用于对数据安全十分敏感的资产管理以及医疗保健等行业,因此提高RFID系统的安全性是亟待解决的问题。由于RFID系统中标签的计算资源有限,因此一些发展成熟但运算复杂的安全协议无法
近年来人工智能技术,尤其是深度学习取得了重大突破,被广泛应用于金融、医疗、自动驾驶、工业制造等领域。大数据作为人工智能技术发展的关键驱动力,其数据源正从大型数据中心转移到越来越多的终端设备上,然而终端设备所有者出于隐私保护的需求,可能不愿将带有敏感信息的本地数据分享给他人,从而带来了“数据孤岛”的问题。传统的集中式机器学习已经无法解决此类问题,联邦学习(Federated Learning,FL)
随着物联网和云计算技术的高速发展,实时的信息共享给人们的生活和工作带来了极大的便利。车载自组织网络(VANETs)作为一种智能交通系统,实时的信息共享能够有效地帮助车辆提高道路交通信息的共享效率,及时帮助车辆更好地规划出行路线。但是随着隐私泄露事件在物联网中频有发生,支持隐私保护成为了VANETs中首要解决的问题。属性基加密(ABE)因其支持“一对多”的信息共享机制被广泛用于物联网环境中,但是在V
在2019年年末新冠肺炎疫情初期,出现了口罩等防护物资严重供应不足的现象。为了填补巨大的供需缺口,在政府相关政策主导和鼓励下,国内各行各业纷纷临时转扩产各类防护物资。因此,从政府角度科学合理地选择合适的企业来转产应急防护物资,并根据各企业转产条件和社会需求分配合适的生产任务来引导企业最优化生产,既能及时有效地提供应急物资,又能在特殊时期推动企业复工复产,维持社会正常运转。企业转产应急物资一直是业界
信息时代促进了物联网技术的发展,使人们的生活发生巨大变化.智能电网作为其中一个非常重要的分支,其摒弃了传统电网费时费力的人为操作流程,将诸如云计算,5G等先进技术融入到电网中,电网系统在真正意义上变得信息化和智能化.然而,人们在享受智能电网带来便捷的同时,也要面对隐私泄露与数据安全带来的威胁.数据的隐私保护和信息的安全共享成为智能电网待解决的问题.支持细粒度访问控制的属性基加密(ABE)技术,能够
随着商业航天产业的飞速发展,用于保障卫星业务的地面测控站也在不断地建设,天线是该类测控站最前端、最重要的信号收发设备,而作为天线心脏的馈源系统是天线能够实现精准跟踪卫星和星地通信与测控的关键部件。本文对单脉冲自跟踪馈源系统进行了深入的研究,并根据工程需要设计了一款X频段紧凑型单脉冲跟踪馈源系统,所做的主要工作有:1.系统研究和分析了单脉冲自跟踪馈源系统的方案。首先,结合理论和实际工程经验,通过综合
控制流劫持是当前威胁软件程序安全的核心问题之一。为了防范控制流劫持,现有的操作系统都部署DEP、ASLR等防御机制,这些机制虽然能够起到一定的防护作用,但无法抵御隐蔽性更强的代码重用攻击,攻击者可以收集程序中的代码片段构造出图灵完备的恶意代码片段。鉴于此,研究者提出了多种控制流完整性保护方案。二进制控制流完整性保护相比源码级保护而言,能够抵御恶意编译器并对COTS程序进行保护。但是在决定控制流完整