基于数据仓库技术的上海市实有人口数据库维护

来源 :东华大学 | 被引量 : 1次 | 上传用户:siyuezaici
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为国际大都市的上海,随着改革开放的发展,其人员流动性越来越强,实有人员信息很难准确及时地更新到实有人口数据库中,致使在实有人口数据库中登记的实有人口数据与实际情况存在较大的偏差,这为安全治理、疫情治理等紧要事件的处置决策产生了较大影响。实有人口数据库中数据不准确的问题具体表现为存在大量在沪但信息未登记到实有人口数据库(以下简称漏登)的人员以及人已离沪但信息未从实有人口库中注销(以下简称未注销)现象。随着大数据时代的到来,人们进行各种社会活动时都会在海量数据中留下一笔,如常见的小区感知、手机信令、外卖、快递等产生的数据。海量的人员行为和生活数据为分析漏登人员和未注销人员提供了一定支撑。本文利用大量的人员行为和生活数据,借用数据仓库技术,对维护上海市实有人口数据进行一些探索性研究。本文进行的具体的研究工作如下:(1)提出以不断更新的人口数据和现有的实有人口数据库为基础,构建可疑人口数据仓库来及时更新本市实有人口数据库。首先,对公安获取的各类人口数据进行分析,了解各数据源中数据的特点和数据获取周期;然后建立疑似未注销和疑似漏登主题数据仓库;最后,利用Kettle对获取的数据进行ETL处理,通过与实有人口数据库中已登记的数据进行比对,将各类数据源中的可疑人员数据(疑似漏登或疑似未注销)加载到数据仓库中。(2)结合实有人口中各类人员产生数据的特点和各类数据源特点,比较详细地阐述了未注销人员和漏登人员的排查逻辑,包括数据融合分析方案。通过对数据仓库中的数据进行分析,最终排查出高疑似未注销人员信息和高疑似漏登人员信息,用以及时更新上海市实有人口数据库,在一定程度上解决了本市实有人口数据库中数据更新不及时、不准确的问题。(3)本文利用Spring Cloud、Quartz、Echarts、Vue.js等相关技术,设计并实现了基于微服务架构的上海市实有人口数据库维护系统平台。该系统是基于可疑人口数据仓库实现,实现了对数据的实时监控、任务自动调度以及数据统计分析等功能,在一定程度上为公安部门对实有人口数据库维护和使用提供支撑。
其他文献
据研究数据表明,当代小学生的抑郁率正逐年上升,与之伴随的就是严峻的亲子关系。基于这些现状,教育部于2021年颁布实施了“双减”及《家庭教育促进法》等相关政策。亲子互动教育也逐渐成为近些年教育界最火热的话题之一。由于社会及政策背景与以往截然不同,当代“10后”小学生的情感化关怀需求也愈来愈多,因此对他们的教育方式也不能再向以往一样循规蹈矩。与此同时,互联网的崛起也意味着后喻时代的到来,对于“10后”
学位
建国初期,工资制度经历了工资米、折实单位到工资分再到货币工资制三个阶段的改革。上海报业也先后经历了公私并存到公私合营的过程。报业性质的变化影响着工资制度的变化。本文以上海报业为中心,考察国家工资制度改革的背景下上海报业工资的变化情况,探析报业工资变化对报人生活和工作所带来的影响。文章主要分为五个章节。第一章为上海报业工资改革的背景。主要介绍上海报业旧的工资制度、解放初期上海报业的情况以及上海报业公
学位
改革开放推动我国社会和经济迅速发展,新型城镇化在党的十八届三中全会上被提出,国家对农村妇女就业现状越来越重视,试图通过一系列措施解放农村妇女劳动力,解决农村妇女就业问题。本文以淮安市农村妇女为调查对象,通过访谈和问卷调查,深入了解农村妇女就业现状,总结出淮安市农村妇女就业机会少、就业保障不足、就业能力薄弱、就业信息不通畅等问题,分析其原因,并针对问题提出了四种对策,探索提高农村妇女就业增收的方法和
学位
汽车工业是推动社会经济发展的重要力量,然而由汽车引发的环境问题也不可小觑。世界各国汽车消耗的石油占总消耗量的一半以上,同时汽车排放的尾气是造成全球气候异常、环境污染等问题的主要物质。着力推进安全、环保、高效的能源体系建设是缓解当前全球能源紧缺、气候异常的有效途径,且对提升国家能源技术创新与国际竞争力具有非常重要的意义。水是氢能源作为燃料进行燃烧时的唯一产物,不会对人类生活环境产生污染。不仅如此,地
学位
国家军用标准《军用软件开发文档通用要求》最新版于2021年12月30日发布,并于2022年3月1日起实施,其中一项比较明显的变更就是删除了前一版中的“软件研制任务书”文档。通过对《军用软件开发文档通用要求》各个版本修订过程的分析,以及对军用软件行业发展现状的研究,得出了“删除软件研制任务书”这一修订对于军用软件研制的影响,并从“需求追踪的实施”及“不同项目对软件研制任务书的去留”两个方面,给出了军
期刊
目的研究系统性健康教育干预对脑肿瘤患者的临床护理效果。方法选取时间在2019年1月-2020年1月的70例患者,分为两组,进行不同护理。结果对两组经过护理后的临床满意比例进行分析后显示出作为观察组其满意程度较高,其在满意一项中有31人达到,占比88.57%,而对照组只有28例,比例为80.0%。对比不满意人数则对照组出现7例,显著多于观察组的4人。结论将系统性健康教育干预方式给予脑肿瘤患者,可防止
期刊
乡风文明建设是乡村振兴的重要组成部分,是补齐农村多方面发展的重要途径,是实现乡村振兴的必要选择。乡风文明是指农民群众的思想、道德、文化水平不断提高,文明意识、法律意识不断加强,农村风气积极提高的状态。乡风文明建设,意味着农民科学文化素质、生活水平的改善、不良生活习惯的变化、生活质量的提高、官寨苗族乡优秀传统文化的继承和发扬,抛弃传统文化的落后和消极因素,选择性地吸收外来文化的积极因素,适应新时代背
学位
高科技生物技术的“沉浸”使人类进入了后人类时代。在信息技术、生物技术以及虚拟技术等现代技术的发展下,人类对各种生物的改造及人类有机体的改变导致当前伦理范式的转变。此外,随着环境破坏和气候变化的发展,人类与后人类、动物和基因改变的类人物种之间的紧张关系日益加深。在这样的社会环境背景下,《疯癫亚当》小说三部曲应运而生。三部曲是一部关于如何克服人类中心主义的推测性小说,作者在其所虚构的世界里描写了生物科
学位
东南亚地区是中华文化向海外播迁和衍伸最重要的区域之一,其与中国历史上发生的大小事件息息相关。东南亚地区的华文报刊也十分关注中国内地所发生的各类新闻情事。《叻报》是在新加坡创办的第一份华文日报,也是南洋地区华文报刊的突出代表,是考察域外新闻对中国大陆关注报道的绝佳视角。自甲午以来,有关中国的新闻报道就占据了《叻报》的主要版面,自此后,晚清所发生的政治事件《叻报》基本都有所跟踪报道。《叻报》对义和团的
学位
高校体育实行教学信息化建设与管理能够提高体育教学效率,促进体育教育资源共享,加快数字化校园教育平台建设步伐。当前,高校体育教学信息化建设与管理面临教师对体育教学信息化认识不足、缺乏科学的体育信息化教学资源、体育信息化教学的基础设施欠缺、体育教师的信息化水平有待提高以及缺乏体育信息化教学的考核体系的问题。高校体育教学信息化建设与管理的实施要提高体育教师的信息化教学意识,加强体育信息化教学资源的建设,
期刊