基于强化学习的长距离输水系统闸门调度研究

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:jfhz2001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
长距离输水工程不仅是缓解水资源时空分布不均的有效途径,也是推进经济发展和保障环境效益的国家重大战略设施。明渠输水系统在长距离输水工程中较为常见且备受关注。在该系统中,通过闸门调控实现渠道水力控制来改变水流的自然状态,从而完成对水资源的重新再分配。但随着工程规模量的增加,水力条件更加复杂,闸门调控难度也呈指数增加,故对长距离输水工程中闸门调控的研究十分必要。近些年,人工智能领域快速发展,强化学习在工程方面开始普及,其所需数据量少和自学习能力可以较好的解决工程中运行数据不足和调度模型尚不完善的难点。因此本文尝试将强化学习应用于长距离输水工程中,对工程中较为典型的渠段进行研究分析,从而判断强化学习在长距离输水系统中的适用程度。本文研究内容及主要成果如下:(1)搭建长距离输水工程中典型渠段的水力学模型并进行二次开发。首先利用HECRAS软件对长距离输水工程中典型的工况进行水动力学模型构建,之后通过Python语言对水力学模型计算过程进行二次开发,实现水力学模型参数传入和结果读取,为后续强化学习环境模块构建提供模型基础。(2)基于示例工程对强化学习模型中奖励函数和基本参数的设定进行研究。首先以实际工程为基础构建小规模示例工程用于强化学习模型测试和研究,随后围绕强化学习中奖励函数和超参数设置进行讨论。结果表明奖励函数类型对强化学习模型有重要影响;动作分布函数类型为贝塔分布时强化学习能表现出更好的水力控制能力;学习率等超参数对于模型影响相对较小。(3)以南水北调中线工程中部分渠段为基础,设计不同工况对强化学习模型进行验证。其中单闸门调控中,水位达标率和流量达标率能在94.88%以上;多渠段多闸门联合调控中,目标水位达标率在84.27%以上,目标流量达标率在94.76%以上;多渠段分水闸与节制闸联合调控中,目标水位达标率在100%,目标流量达标率在90.13%以上,因此强化学习模型对不同工况具有一定的鲁棒性,可对水位和流量等进行有效控制。
其他文献
随着我国水利水电事业的发展,混凝土水工隧洞的数量和长度在不断增加。混凝土水工隧洞在服役一定的年份后,往往会出现不同程度的病害。病害缺陷的产生,对隧洞正常运行造成不利影响,甚至可能会引发人员生命财产损失的灾难性后果。因此,研究针对混凝土水工隧洞病害缺陷的结构健康实时监测方法在工程实践中具有十分重要的意义。本论文以混凝土水工隧洞的一段截面作为研究对象展开系列研究,主要内容如下:(1)探讨了压电智能传感
学位
海洋中的波浪能具有分布广泛、清洁、可再生和储量丰富等优点。在化石能源日渐枯竭、环境压力不断增大的现代社会,波浪能开发利用相关技术的研究对于开发海洋资源、改善能源结构和实现碳排放、碳中和任务等具有重要意义。基于点吸收式波浪能发电原理,本文提出了一种新型波浪能开发利用设想:“基于TMD原理的波浪能发电”思路(以下简称“TMD波浪发电”)。围绕该波浪能发电思路,本文从理论分析、原理机设计、优化设计等环节
学位
随着我国特高拱坝建造技术日益成熟,其所带来的安全问题和社会影响也越来越大。同时特高拱坝建设的新浪潮,也使得拱坝分析手段得到大的突破,尤其在拱坝参数反演分析方面,智能优化算法得到了广泛的应用。针对特高拱坝反演分析问题,研究高效的监测数据反馈分析方法,以实时了解大坝的安全运行状况,能反馈指导大坝施工和运行。本文以某特高拱坝的实际监测资料为基础,建立了特高拱坝变形统计回归模型,并基于位移监测数据分离水压
学位
城市交通环境中的车辆、行人和交通信号因受到雨雪等天气特征遮挡,导致车载相机采集的图像质量下降,增加了交通目标的特征提取难度。为提升无人车对恶劣天气的适应能力,本文采用生成对抗网络对包含天气噪声的图像进行图像增强,借助目标检测和图像增强技术为无人车在恶劣气象环境下行驶提供增强检测办法,降低无人车对交通目标的误检和漏检率。本文针对恶劣天气下的交通目标增强检测技术进行如下研究:(1)针对雨天环境中相机采
学位
受人类活动和气候变化影响,永定河流域天然径流逐年下降,平原河段出现干涸或断流,严重制约了区域的经济社会可持续发展。2016年国家开始对永定河进行综合治理和生态修复,致力于打造永定河绿色生态走廊,2017年永定河开始进行生态补水,断流河段逐渐恢复河流自然特性,但是实际的生态补水量远高于预期,平原河段由于干涸时间较长、地下水位骤降且河床沙化导致渗漏水量与理论数值严重不符,所以本文以永定河流域为研究对象
学位
奋斗创造历史,实干成就未来。新时代奋斗观是习近平总书记对新时代党和人民如何保持昂扬的奋斗姿态并进行不懈奋斗的总体部署,是对新时代“因何奋斗”“何为奋斗”“谁来奋斗”以及“如何奋斗”等一系列重要理论和实践课题进行的全面系统地论述,是在马克思的奋斗意识、中国共产党的奋斗精神、中华民族优秀传统文化中的奋斗基因以及习近平总书记的实践经验基础上所形成的智慧结晶。经济全球化背景下,综合国力的竞争归根到底是科技
学位
我国水资源时空分布不均,与人口、生产力、土地布局及用户需水在年内的分布不相匹配,水资源供需矛盾突出,需要通过水资源的时空合理调配以实现水资源的精细化管理并有效实施最严格的水资源管理制度,满足经济社会发展和生态环境改善需求。水资源精细化管理的关键在于明确地市以及月等更细时空尺度的供用水情况。目前,仅可获取年尺度省级或流域的地面观测供水数据或者取水统计数据,在时间和空间上存在严重不足,且水文气象资料常
学位
近年来洪涝灾害多发频发,严重危害了人民群众生命财产安全。水库是重要的防洪减灾工程措施,防洪预报调度是保证水库自身及上下游防洪安全的重要非工程措施。利用预报信息进行水库防洪调度,可有效提高防洪效益,但预报信息不可避免存在不确定性,可能导致决策失误,给水库和下游带来防洪风险。水库采取不同方式应对预报不确定性时,水库泄流不同,从而导致水库上游风险和下游风险不同,预报不确定性在上-下游之间传递。预报不确定
学位
中国已经建成了多座混凝土高拱坝,出于安全原因,它们需要有效的技术指标,具有可靠的规格和标准。整体稳定性问题十分突出,特殊荷载、极端天气等各种不利因素都会影响大坝的动态性能,可能引起大坝运行问题。因此,混凝土坝的健康监测需要持续可靠的研究。变形对高拱坝工作性能的影响会引起严重的问题。根据以前的工程经验,工程问题经常出现在蓄水的早期阶段。适用于高拱坝初期的位移监测模型(DMM)的研究具有重要的理论意义
学位
云是影响气候变化最重要的因子之一,云水过程是沟通大气中各类物理过程的桥梁,云结构的复杂性带来云辐射计算的困难,使其成为当今模式评估中最大的不确定性来源之一。深入研究云结构特征有利于为天气气候模式物理方案的改进提供参考依据。本文使用2007至2016年十年间MODIS、CERES、ISCCP及Cloud Sat/CALIPSO卫星数据,采用时间/空间技巧评分等研究方法,对中国地区云系发生频率及宏微观
学位