基于地理信息的数据清洗探讨与实践

来源 :信息工程大学学报 | 被引量 : 0次 | 上传用户:maxiao912
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
实际工作中,由于数据来源多样、结构不一,入库前需要进行删除、合并、补充等数据清理工作。针对实例层,利用数据的地理信息特征,清洗多源数据。具体过程包括剔除明显错误数据;基于空间条件重构唯一名称字段标识,以唯一名称删除重复点、匹配挂接两个数据,提取要素地理坐标信息;利用正则表达式、线索词抽取信息。结果表明,该方案能够将多个政府部门的文本信息融合到地理信息数据属性表中,使数据达到入库标准。
其他文献
针对反馈控制回路中,控制器的调节能力会在一定程度上掩盖执行器的性能下降的问题,提出一种基于二分类非负矩阵网络的故障状态评估算法,实现执行器的在线故障状态监控,包括故障分类和退化评估。该方法提取样本的局部静态特征,建立了分类器模型以形成网络;并且引入相似度来描述样本之间的动态特征。为实现执行器故障状态评估,融合网络输出的静态距离与动态变化,构建了故障判别指标和退化指标。通过双容水箱液位串级控制实验和
复杂网络中节点的异质性导致各个节点的重要性是截然不同的,而关键节点往往对网络的结构和功能具有巨大的影响力,所以通过节点重要性排序算法对关键节点进行挖掘的研究一直受到各方面的关注。将复杂网络中关于节点重要性的排序算法进行研究,比较了各种方法的优势和缺陷,并对重要节点挖掘算法的应用方向和常用数据集进行介绍,最后对现有研究进行了总结,并对未来的研究方向进行展望。
多机械臂执行协同任务时,由于作业环境、装配条件、系统扰动等诸多非线性因素影响,其末端位置难以精确跟踪目标并保证一致,导致协同工作时产生较大误差。为解决多机械臂位置协同控制问题,通过研究新颖的信任机制,包括信任值(自信任值和互信任值)自适应更新机制和Fisher信息权重(协方差)更新机制,提出一种基于多智能体的自适应位置协调控制算法,当系统存在干扰时,实现多机械臂末端位置一致跟踪到目标位置,提升自动
为在战场电磁环境下进行科学分配频率,减少各部队用频设备之间的相互干扰,提出一种基于混沌扰动机制粒子群算法的频率分配方法,将战场频率分配转化为带约束条件的最优频谱资源查找求解问题,建立以干扰代价最低为目标的频率分配模型,通过改进的粒子群算法进行频率分配。该算法引入混沌扰动机制,提高种群多样性和算法全局寻优能力,避免算法陷入局部最优。通过实验表明,在频率分配过程中该算法是可行的,并且其收敛性和解集的多
虚拟机的安全运行是云计算运行环境可信性的重要保证。针对基于虚拟机自省的安全检测方法在云环境规模化、多样化虚拟机场景下面临通用性监控与深度检测问题,提出基于VMCS结构体的虚拟机恶意对象关联检测方法,实现异构虚拟机内存无痕地、通用地获取,以及对虚拟机内、虚拟机间恶意行为的深度检测。最后,通过实验验证了所提方法对主流的Linux和Windows操作系统皆可有效处理,通用性较强。
军事领域非结构化文本中的大量目标实体往往包含丰富的军事信息和军事知识,对其准确识别是进行军事信息抽取和军事知识组织的基础性关键任务,也是构建军事知识图谱的重要环节。针对军事领域标注数据不足以及军事实体边界模糊的问题,提出基于预训练BERT模型的深度学习识别方法。利用BERT生成基于当前输入语境特征的动态字向量来增强字的语义表示,融合字的含边界词性特征得到特征融合向量,再连接BiLSTM-CRF神经网络。在自建的军事领域标注数据集上的实验结果表明,相较于另外两种基准方法,该方法在准确率、召回率和F值上获得了
针对频域子空间正交性测试(TOFS)算法不能处理宽带相干信号波达方向估计(DOA)的问题,提出两种解决方法:一是将修正Toeplitz协方差矩阵重构技术应用到原TOFS算法中,对各频点协方差矩阵做修正Toeplitz化预处理,恢复协方差矩阵的秩与目标数目相等,该方法在低信噪比估计精度有所提高,但会导致阵列孔径的减小,当信源数目较多时,估计偏差较高;二是提出一种基于虚拟变换的解相干TOFS改进算法,该方法利用各频点协方差矩阵的特定元素构造虚拟阵列接收数据,而后进行虚拟空间平滑以达到解相干的目的,与现有算法相
虚假评论的检测与治理,对净化网络环境具有重要的意义。针对现有的虚假评论检测方法收敛速度慢、准确率低的问题,提出一种融合评论情感特征的虚假评论检测方法。首先,基于预先构建的情感词典,设计情感特征抽取方法抽取情感特征;其次,引入Transformer模型对融合情感特征后的嵌入表示提取特征向量;最后,将特征向量送入全连接层并利用softmax函数实现真实评论与虚假评论分类。采用Amazon数据集,设计实验验证了基于情感词典所提情感特征的有效性,在融合情感特征后准确率提升了1.19百分点;同时与深度学习LSTM方
智能反射面(Intelligent Reflecting Surface,IRS)是一种基于数字超材料的新兴技术。通过对IRS上多个反射元的电磁特性进行联合设计与调控,可以实现对于无线通信环境的实时控制,从而进一步解决当前无线通信系统中存在的问题。对IRS的相关研究文献进行了综述,从基础理论、提升系统通信性能、提升系统物理层安全性能三个方面总结了当前的研究成果与进展,并且进一步讨论了在设计IRS辅助下的无线通信系统时所面临的挑战以及潜在的研究方向。
电影虚拟摄影是电影虚拟预演中的重要环节,针对现有虚拟摄影成本较高、使用体验较差、仿真度较低等问题,提出一种电影虚拟摄影半实物仿真系统,采用与电影创作者真实拍摄时操作方法一致的半实物仿真虚拟摄影模块进行虚拟摄影,解决了以往虚拟摄影操作难、不符合真实操作习惯的问题,为电影虚拟预演提供更符合电影创作者拍摄习惯的虚拟摄影形式,有效推动电影虚拟预演的发展。