大数据技术在普查数据资料开发中的应用

来源 :统计科学与实践 | 被引量 : 0次 | 上传用户:hunyuan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文基于普查数据资料开发的现状,总结现行模式的问题,结合普查数据资料特征,基于大数据的技术,提出普查数据资料开发的新架构。并利用Spark大数据平台和Scala、Python程序语言完成开发,实现多层级大规模普查数据资料开发,中间过程无人介入,直接生产成品。新架构在浙江第三次农业普查数据资料开发的实践中,大幅提高了工作效率,节约了人力资源,减轻了基层负担,展现了很好的应用前景。
其他文献
中国现代美育开启于蔡元培的"以美育代宗教说",这使对宗教问题的讨论成为理解美育现代价值不可回避的背景。从中国清末民初的历史看,蔡元培之所以提倡以美育代替宗教,除了宗
鄂尔多斯盆地煤层气含量丰富,是我国煤层气勘探开发的重要区块。为搞清该区煤层气的富集规律,通过现场解吸等手段研究了该区煤层气地质特征;通过分析不同煤层气井的含气量、
目的分析克罗恩病合并肛瘘的综合治疗效果。方法选取2013年1月~2016年1月在我院进行克罗恩病合并肛瘘治疗的30例患者为研究对象,给予综合治疗,对比分析其治疗效果。结果经过
目的:探讨自拟通窍止鼽汤对过敏性鼻炎患者临床症状、炎症因子及复发率的影响,以期优化原有治疗方案。方法:选择我院收治的过敏性鼻炎患者90例,采用随机数字表法将其分为治疗
作为程序源码漏洞检测的重要方法,静态代码分析技术一直活跃在代码分析领域的前沿。本文首先对近年来静态代码分析技术 的研究现状和发展进行了整理和叙述,介绍了静态代码分
山地直播建杏园山杏种植有两种,直播山杏和苗圃育苗移栽。对于面积大、土质薄的山岭坡地,发展杏园采用直播方式最适宜。这是因为直播的山杏根系发达、垂直很深(可达10米以上)。直播
期刊
美国著名心理学家、教育家劳伦斯·科尔伯格在总结前人研究成果的基础上,于20世纪五六十年代采用道德两难讨论的方法对10-16岁青少年的道德认知发展进行了科学而系统的研究,
文章针对发展基层党内民主、健全民主集中制过程中容易出现的问题,探讨了如何解决问题的对策,同时对探索和创新党内基层民主的实现形式提出了具体建议。
近代物理大师爱因斯坦说过:兴趣是最好的老师。因此在语文教学中要坚持以趣促学,通过构建和谐的师生关系、开展课外阅读、进行作文说话的实践、提高授课艺术等方式,充分调动学