基于系统工程思想与数据分析技术的水资源水量监测数据价值提升研究

来源 :中国航天科工集团第二研究院 航天科工集团第二研究院 | 被引量 : 0次 | 上传用户:VIPT250
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
国家水资源监控能力建设项目于2012年开始实施,水资源监测在全国范围内迅速展开,通过实时监测能够获取到大量的监测数据,为水资源科学化、定量化、精细化的管理提供了坚实的基础。但是,由于外界环境干扰、监测设备故障等各种因素的影响,导致原始监测数据存在部分异常。水资源监测数据不能直接使用,数据的价值得不到充分发挥。为了提升水资源取用水量监测数据的价值,本文应用系统工程思想和数据分析技术开展以下研究。  (1)水量监测数据异常值分析与数据质量评价。以广东省的取用水量监测数据为例,对取用水量监测数据的异常情况进行分析并查找原因。为了评价取用水量监测数据的质量,构建数据质量评价指标体系,并建立数据质量评价数学模型。以广东省某地级市M市的取用水量监测数据为例,分别对自来水厂、火力发电厂、其他企业的水量监测数据质量进行了评价,结果发现自来水厂的数据质量相对火力发电厂和其他企业要好一些。  (2)历史水量监测数据异常值检测、校正和预测。对于时间序列数据的异常值检测和校正,提出了中位数-EEMD-曲线拟合方法,并利用公开数据进行验证,结果表明该方法能够有效检测出异常值,包括局部异常值。把中位数-EEMD-曲线拟合方法应用于历史水量监测数据的异常值检测和校正,经过异常值检测和校正后,获得更加可靠的数据,再应用贝叶斯神经网络和支持向量机分别对取用水量历史监测数据进行预测,并以自来水厂B1和电厂D103数据为例进行仿真实验,结果表明两种算法的预测性能都比较好。  (3)实时水量监测数据异常值检测和校正。提出了基于中位数-EEMD-曲线拟合-贝叶斯神经网络的取用水量实时监测数据的异常值检测、校正方法。应用中位数-EEMD-曲线拟合方法对历史监测数据的异常值进行检测和校正,然后用贝叶斯神经网络对即将上报的数据进行预测,通过计算预测值与上报数据的偏差比率,从而判断上报数据是否异常。若为异常,则用预测值替换上报数据。以自来水厂B1的数据为例进行仿真实验,结果表明该方法有效。  (4)取水总量计算与趋势分析。水量计算与趋势分析之前都需要经过异常值检测和校正。以M市的取用水量监测数据为例,把监测点分为自来水厂、火力发电厂、其他企业3类,根据监测数据的缺失比例,把监测点分为数据完整型和数据缺失型。对于数据完整型监测点,采用中位数-EEMD-曲线拟合方法对监测数据进行异常值检测和校正,然后再用校正后数据的平均值计算监测点的年取水量;对于数据缺失型,用中位数法筛选出正常数据,然后以正常数据的均值计算出监测点的年取水量。与原始数据的平均值计算出的年取水量相比,用本文提出的方法计算出的年取水量更加接近水利普查数据和取水许可证许可水量数据。对于数据完整型监测点,用EEMD方法对经过异常值检测和校正后得到的时间序列数据提取变化趋势,结果发现一年中大多数自来水厂的日取水量呈现先增后减的抛物线变化趋势,电厂和其他企业日取水量的变化趋势相对平稳。  综合以上四个方面的研究,总结出把系统工程思想与数据分析技术结合用于提升水资源取用水量监测数据价值而形成的一整套体系,包括异常值分析、数据质量评价、历史和实时数据异常值检测与校正、取水总量计算与趋势分析。通过本文的研究,充分证明了系统工程思想与数据分析技术能够有效提升水资源监测数据的价值。本文提出的方法可为水资源管理提供参考建议。
其他文献
该论文提出了几种广义预测控制和直接自适应模糊广义预测控制方法,并用仿真算例验证了所提方法的有效性.文中所得到的主要结果如下:1能够保证稳定性的广义预测控制方法(1)推
该文以金融领域为例,探讨了在开发面向行业的OCR系统中,字符分类器的设计与实现.该文分析了金融领域字符图象的特点.针对该领域常见的几种图象噪声,提出了相应的去噪和归一化
该文所作的工作总结如下:1.自整定方案的选取:从自适应控制的关键因素——参数的整定出发,选取简单有效的自整定方案.该文在比较了几种常用的工程整定方法各自的优缺点后,结
论文主要针对帧频提升算法的应用及其硬件实现,提出一种基于插补的帧频提升算法-75Hz逐行扫描格式转换算法.作者所提出的算法充分利用输入视频信号的原始信息,在最大程度上减
该论文第一章,讨论了现场总线控制系统的现状,对几种流行的现场总线进行了详细的比较,并提出了需要解决的问题.第二章对计算机网络、数据通信、开放系统互连参考模型等与现场
该课题以哈尔滨某单位的SZF-1型"三轴飞行模拟转台"为研究背景.该文给出转台计算机控制中数字控制器的设计方案,并对迭代学习控制理论在转台速率控制中的应用进行了研究.该文
ERP既有很强的管理内涵,又需要强有力的技术支持.该文主要是站在技术的角度探讨ERP的实现技术,并以培训管理系统和药业营销管理系统为蓝本进行分析设计.在此基础上说明了在开
该文对基于HLA/RTI的分布式交互仿真体系结构及数据分发管理的研究,具有较强的先进性和前沿性.该文首先深入研究了基于HLA的分布式交互仿真的体系结构,及其对互操作和可重用
该文以某石化厂乙烯气相法合成醋酸乙烯反应过程的空时得率和催化剂选择性软测量为研究对象,基于现场采集数据及机理分析,确定了辅助变量.对现场数据进行处理的基础上,探讨了
本文首先阐述了交-交变频器的国内外发展概况及其应用场合,然后在传统的单变量控制原理的基础上引出了双变量控制原理,并对双变量控制原理中采用不同控制方法时所输出的电压波