基于Spark框架的生态风险预测研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:bye_bye
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着对生态环境保护的重视程度日益增高,生态环境的变化以及人类活动对生态环境造成的负面影响日益受到人们的广泛关注。与此同时,资源环境保护与生态文明建设已成为我国新时代发展建设的重要组成部分,生态风险评价与预测是其中重要的一环。通过构建定量化的评价指标体系,对生态环境以及生态保护取得的进展和成效进行科学客观的评估,为环境保护与生态修复、风险源的规避减缓与适应、生态风险防控,以及生态风险管理机制研究提供决策与数据支持。本文以Spark大数据集群下的生态风险预测为核心研究目标,在梳理分析了生态风险评估领域研究成果的基础上,构建了基于生态功能重要性和生态环境敏感性的生态风险评价指标体系,搭建了基于熵值法的压力-状态-响应生态风险评估模型,实现了基于深度学习神经网络的生态风险预测算法,探索了基于Spark框架的生态风险预测算法并行处理的研究,设计完成了模型算法的实验与分析,针对大数据集深度学习任务所存在的训练时间长的问题提供了一种可行的解决方案。本文主要的研究工作和成果如下:(1)通过对生态风险评估理论及评估模型的学习和梳理,结合研究区域生态环境的实际情况,分析建立了基于生态功能重要性和生态环境敏感性的评价指标体系,以及基于熵值法和压力-状态-响应的生态风险评估模型。该模型不仅考虑了多风险源对生态环境的影响,而且弥补了传统评估模型在多风险源间相互作用方面的不足,同时评价指标权重的确定由数据本身计算,减少了人为确定权重的工作量及主观性,从而拓展了模型的适用范围、提高了评估工作的效率。(2)通过对深度学习在生态风险预测方面的应用研究,总结了循环神经网络(RNN)、长短期记忆神经网络(LSTM)以及注意力机制(AM)的特点,在LSTM模型的基础上引入注意力机制。Att LSTM在时间序列预测上表现出巨大的潜力,论文基于Python编程语言设计实现了Att LSTM的生态风险预测算法,并对单一LSTM模型及Att LSTM模型进行对比分析,验证了Att LSTM模型的可行性与有效性。(3)通过实验验证该生态风险预测模型的效果以及Spark集群环境并行处理模式下的执行效率,并对实验结果进行了分析和讨论。实验结果表明,基于Spark集群的深度学习平台对预测模型的并行化处理具有良好的加速比,能有效提高大数据集的并行处理能力。(4)在本文研究成果的基础上设计开发了“青海城市云大数据生态保护决策支持系统”,将生态风险评估及预测的算法模型进行了集成和封装,对于生态风险评估及预测具有一定的适用性、拓展性和可移植性,同时对于其他领域的分布式深度学习任务具有一定的参考价值。
其他文献
健康是居民幸福生活的重要保障。随着我国社会经济和医疗水平的发展,居民人均寿命年限不断增长,重大疾病的过早死亡率也逐年降低。但民众的心理健康问题却日益凸显,慢性病的患病情况也日趋严峻,给公共健康造成了巨大威胁。绿地是城乡环境的重要组成部分,现有研究表明绿地与居民的健康行为和健康结果间存在关联,优化绿地规划可以成为促进居民身心健康的一条重要途径。不过目前国内的研究一般只关注某一项健康指标,或是仅针对某
学位
随着世界人口老龄化问题的加剧,老年人群居家养老逐渐成为趋势。独居的老年人在家可能会出现各种异常行为,比如跌倒而无法及时发现,这会对老人造成严重的伤害。此外,日常行为顺序的异常可能暗示着某些慢性疾病如阿尔兹海默症,及时发现这些异常可以有效避免其中存在的健康隐患。新兴的智能检测技术为老年人群异常行为检测提供了一种解决方案,然而目前的研究尚存在一些不足之处:(1)忽视了老年人群对这一新技术的关注因素如隐
学位
<正>现在,我们看到的飞机多为单翼机,即左右各有一个机翼。但是,世界上第一架飞机其实是双翼机。飞机设计师是如何将机翼数量“化繁为简”的呢?飞机诞生之初为双机翼18世纪后期到19世纪上半叶,英国空气动力学家乔治·凯利,通过对鸟类飞行原理,以及鸟翼面积、鸟的体重与飞行速度的大量观察研究,发现机翼产生的升力与飞行速度的平方及机翼的面积存在着成正比的关系,此外,升力系数还会随机翼的迎角发生变化。
期刊
由于超大直径盾构的特性,其开挖面上始终有内外压力差存在,开挖面处于“相对平稳和绝对失稳”的状态,有较高的失稳风险,但传统的开挖面稳定研究主要针对开挖面的失稳破坏条件,无法在实际工程中判断开挖面的相对稳定情况;开挖面稳定性受地层及机电液控制系统的影响,基于实时信息监控系统,盾构机收集了种类繁多、数据量极大的盾构数据,但参数间相互作用的机理及其对于开挖面稳定性的影响尚不明确。针对上述问题,在数据驱动的
学位
目前我国的一些干旱地区及一些偏远山区,受限于水资源匮乏、供水管网敷设成本高、管网敷设施工困难等问题,目前仍有大量居民使用集雨窖水作为生活用水及饮用水的水源。在向第二个百年奋斗目标进军的第一个五年计划中,党和国家高度重视解决民生问题,而解决好居民的饮水安全问题更是解决民生问题的重中之重。本课题基于部分干旱地区及一些偏远山区使用窖水的供水体制和水质特点,并在本课题前期研究成果的基础上,设计加工制作了一
学位
随着我国现代化和城镇化的高速发展,能源消耗的需求持续增长。习近平主席在巴黎气候变化大会上提出中国将于2030年前后使二氧化碳排放达到峰值,在节能减排能源战略的大背景下,我国能源研究领域的重点是通过技术创新提高能源利用效率、发展高效清洁能源。本文提出双层相变通风屋面,该屋面的主体结构是在普通预制混凝土屋面的基础上增加了两层相变材料,在夏季利用相变材料的蓄热特性和自然冷源大大削弱室外气候对室内环境的影
学位
随着我国经济的持续高速发展,社会用电量急剧提高,电力负荷峰谷差也逐步增大,对电力系统稳定运行提出更高要求。水电能源具有启停迅速、能快速响应电网负荷指令等灵活性特点,不仅可为电网输送优质能源,还可承担电力系统调峰调频任务,平衡电力系统动态供需关系,为电力系统安全运行提供有力保障。受社会、环境以及人文等多方面因素影响,电力系统负荷及水文径流存在一定的随机性和非线性性,从而影响电力系统及梯级水库群的安全
学位
硫酸盐有机废水成分复杂、来源广泛,对环境具有较大的危害,同时,高浓度含硫废水的硫回收利用也是硫资源再循环研究中极具前景和吸引力的方向。使用传统生物法处理低碳硫比废水时,由于硫酸盐还原菌(SRB)与产甲烷菌(MPA)存在竞争抑制作用,会带来去除效率低、稳定性不高等诸多问题。目前已有大量研究为提高对硫酸盐的去除效果展开,但是仍存在系统酸化、沼气中H2S含量过高等问题。光合细菌能够利用还原性含硫化合物,
学位
成长需求强度指的是个体期望在工作中接受挑战,获得学习、成长机会与职业发展的需求与意愿的强烈程度,现有研究发现,员工个人成长需求强度影响其工作动机、工作绩效、工作满意度与创新行为。当员工在工作中有成长和自我成就的需求时,他们会专注于创造性的想法,并尝试做出导致创造性表现的行为。本研究聚焦个体成长需求强度与个体的两种创造力——激进式创造力和渐进式创造力之间的相关关系与作用机制,并探讨团队成员交换、团队
学位
在第七十五届联合国大会上,习主席提出了碳达峰和碳中和的宏伟目标以应对气候变化。在中央空调系统运行过程中,由于设计余量和自动控制系统工作不良等原因,空调系统能源消耗浪费严重。作为用能大户,空调系统的优化控制和节能显得尤为重要。随着大数据时代的到来,数据挖掘技术在各行业的应用也日渐广泛。在空调领域内,大数据挖掘的作用也日渐显现。本文以武汉市某大型公共建筑的中央空调系统为研究对象,针对空调系统能耗高、既
学位