【摘 要】
：
为实现统计年鉴数据集成整合和综合快速查询,以2000-2018年《中国统计年鉴》及《河南统计年鉴》等全国31个省(市、区)统计年鉴为例,深入分析其数据特征后,采用Alteryx Designer 2019.2学习版,基于工作流技术,经过提取目录及文件、提取文件中的表单、提取表单中表的内容、数据清洗及规范、规范标识数据的6个维度、数据重组和数据输出共7个步骤构建了统计年鉴数据清洗模型.结果表明,在16 GB内存的笔记本电脑上,模型用时4～5 h即可将数据容量达21 GB、包含33万个文件、120万张表单的统
【机 构】
：
河南省农业科学院农业经济与信息研究所,河南郑州450002;河南省智慧农业工程技术研究中心,河南郑州450002
论文部分内容阅读
为实现统计年鉴数据集成整合和综合快速查询,以2000-2018年《中国统计年鉴》及《河南统计年鉴》等全国31个省(市、区)统计年鉴为例,深入分析其数据特征后,采用Alteryx Designer 2019.2学习版,基于工作流技术,经过提取目录及文件、提取文件中的表单、提取表单中表的内容、数据清洗及规范、规范标识数据的6个维度、数据重组和数据输出共7个步骤构建了统计年鉴数据清洗模型.结果表明,在16 GB内存的笔记本电脑上,模型用时4～5 h即可将数据容量达21 GB、包含33万个文件、120万张表单的统计年鉴数据清洗并整合为1套包含6 000多万条指标数据序列的标准规范数据集.构建的数据清洗建模方法具有高效、可溯源的优势.
其他文献
为研究姜曲海猪FoxO3基因组织表达和遗传多态性与肉质性状的关联性,采用PCR-SSP分子标记技术,分析了 112头姜曲海猪FoxO3基因第二外显子的遗传变异情况,利用实时荧光定量PCR检测姜曲海猪心脏、肝脏、脾脏、肾脏、腹脂、皮下脂肪、背最长肌、比目鱼肌、腓肠肌和半腱肌中FoxO3基因的表达量.姜曲海猪FoxO3基因第二外显子500 bp位点存在多态性,得到TT、CC及TC 3种基因型,T基因频率为0.424,表现为中度多态(PIC=0.369);试验猪群的基因频率和基因型频率都处于哈迪温伯格平衡状态(
为构建能稳定携带新城疫病毒(Newcastle disease virus,NDV)血凝素-神经氨酸酶蛋白(Hemagglutinin-neuraminidase protein,HN)基因的减毒鼠伤寒沙门菌Ⅲ型分泌系统,从pMD18-T-HN中扩增出NDV HN基因,并将其克隆入载体pYA3493-sopENt100,构建重组载体pYA3493-sopENt100-HN,然后将其电转化至减毒鼠伤寒沙门菌△crp△asdSL1344,并对其重组菌的生长特性、遗传稳定性、表达特性和毒力特性等进行分析.结果显
随着大数据技术日益成熟和数字化转型进一步推进,企业利用大数据技术分析研发和经营管理过程数据,为辅助决策提供依据.数据仓库承担着数据存储的职责,但是数据仓库本身数据量大且格式不一致,造成数据仓库无法直接对应用提供访问服务,因此需要在大数据环境中引入三层存储结构,提高大数据的使用效率.
椰子果加工成椰青后容易褐变和霉变,文章结合国内外椰青相关标准以及保鲜技术的研究成果制定出椰青采收、采后处理、包装、分级、贮运及销售方面的技术规程,为椰子鲜果产业的发展提供参考.
EM9仪表安装设计是核电站建设必不可少的一部分,华龙一号堆型与M310堆型在EM9仪表安装设计上的差异主要体现在:仪表安装设计文件体系方面;设计及技术要求方面;现场施工对设计的修改权限方面.文章将从上述三个方面详细地介绍两个堆型在EM9仪表安装设计上的区别,供大家参考.
为提高富士苹果的贮藏性,于果实膨大期进行3次叶面喷施外源5-氨基乙酰丙酸(5-aminolevulinic acid,ALA)处理,喷施质量浓度分别为0(清水,CK)、0.5、5、10 mg/L,研究富士苹果冷藏期间(0～200 d)硬度、可溶性固形物(Total soluble solids,TSS)含量、可滴定酸(Titratable acid,TA)含量、丙二醛(Malondialdehyde,MDA)含量及过氧化物酶(Peroxidase,POD)和多酚氧化酶(Polyphenol oxidase
智能制造是“中国制造2025”的主攻方向,铸造行业的快速发展,对专业人才培养提出了更高的要求,基于智能制造背景,华中科技大学工程实践创新中心对实践教学平台进行了升级,针对教学内容与产业需求相脱节的地方进行了课程体系的重构,这也是文章研究的重点.文章以铸造实践教学为例从实践设施、教学内容等方面进行了探讨.
以2-丙烯酰胺基-2-甲基丙磺酸(AMPS)和衣康酸(IA)为主要单体,以水溶液聚合的方法,合成了一种二元聚合物,再混入一定量的乙二胺四甲叉膦酸钠(EDTMPS)复配可制得缓凝剂CRT601,通过实验发现该产品缓凝效果优良,温度敏感性和加量敏感性小,在大温差固井中能使水泥浆柱顶部强度快速发展,适用于长封固段固井.
科技创新能力是大学生核心竞争力重要组成部分,科技创新能力培养是高等学校人才培养重要目标,科技创新教育是高校重要实践活动.当前,各高校在大学生科技创新项目实施过程中,存在学生申报项目目的异化、实施动力不足、对指导教师的依赖心理较重等问题,以及指导教师对项目指导薄弱、对项目全过程管理意识不足,对项目评价方式单一等共性问题,文章针对产生以上问题的原因进行了分析,并提出了解决问题的几点方法.
为增强技术创新、科学研究和教学能力,创新和探索企业、科研院所及高校等机构实验仪器设备的管理模式,成为实验仪器设备管理部门紧迫的目标任务.通过分析国内实验仪器设备的管理现状,针对目前实验仪器设备有效利用率不高的弊端,结合实际分别从实验技术团队建设、实验仪器设备信息管理系统建设、使用定价及评价机制等方面对实验仪器设备的管理模式进行探索与技术创新,为实验仪器设备普遍共享提供方向引导及参考方法,加快实验仪器设备共享的步伐,提高实验仪器设备有效利用率.