基于深度强化学习的中央空调负荷预测与节能优化控制

来源 :苏州科技大学 | 被引量 : 0次 | 上传用户:eclava
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国经济等各方面大力协同发展,我国的能源消耗问题是亟需面对的一大难题,而当中占比较高的则是建筑能耗,且占比量仍然不断上升,因此,对建筑的节能优化研究问题近年来广泛受到关注。在各类建筑能耗中,中央空调的耗能比例较高,所以对中央空调进行有效的节能优化,是降低我国建筑耗能的一种主要措施。本研究为了进一步改善中央空调的控制策略,通过使用深度学习中的深度确定性策略梯度算法(Deep Deterministic Policy Gradient,DDPG)来得到较好的控制策略,从而实现能源的有效节约。然而,深度确定性策略梯度算法中有双网络结构而产生的不稳定及单评论家评估不准确的问题,会使得实际应用的最终效果不理想。本研究对原始的DDPG算法进行了一系列改进,研究了一种基于多重指数移动平均评估的DDPG算法,同时利用模糊C均值算法(Fuzzy C-means,FCM)优化的深度双Q网络(Double Deep Q Network,DDQN)对空调机组的负荷进行预测,通过预测到的下一时刻的负荷值给出最优控制,从而实现能源的显著节约。主要包括以下三部分内容:(1)针对DDPG算法中双网络结构的不稳定及单评论家评估不准确的问题,研究了一种基于多重指数移动平均评估的DDPG算法。该算法通过EMA-Q网络(Exponential Moving Average-Q Network)和目标Q网络合作得出目标更新值,并对多个评论家给出的Q值求平均,降低单评论家评估的不准确性。此外,样本池部分引入双重经验回放方法,采用两个样本池分别存储不同的经验,提高算法的收敛性能。实验部分将基于多重指数移动平均评估DDPG算法应用于倒立摆和山地小车中,并与原始DDPG算法进行对比。(2)针对空调负荷具备时序性以及干扰性较高的属性,研究了一种基于FCM优化DDQN的负荷预测方法,相较于原来的针对整个样本进行负荷预测模型的建立,FCM算法首先将样本进行聚类,然后再根据样本的不同类别来进行负荷预测模型的构建,经过FCM算法聚类后的样本,后期作为预测模型的输入时代表性更强,后续的负荷预测准确精度也更高。为了验证该预测方法的有效性,通过将某环境学院记录的实际建筑空调负荷数据输入预测模型之中来模拟空调的实时运行,并将利用FCM聚类后的优化DDQN的负荷预测方法与未引入FCM优化的DDQN负荷预测方法实验数据进行对比分析。(3)将基于多重指数移动平均评估的DDPG算法结合预测得到的下一区间负荷,对空调系统进行更好的控制优化。首先对中央空调系统作了简要的分析,使用基于多重指数移动平均评估的DDPG算法对不同负荷区间进行了变量的优化,变量选择的是冷冻水出水温度、冷却水流量、冷冻水出回水温差,得到最优的参数值,并且根据FCM-DDQN算法提前预测出下一时刻的负荷具体值,选取最优的动作变量值,从而实现空调系统的节能优化。
其他文献
对于工科课程而言,实验课占据着重要地位。传统线下实验教学方式存在软硬件资源不均衡、时间和空间方面的限制等问题,因此国内外开始进行线上实验模式的探索,我校远程FPGA虚拟实验平台也是线上实验探索的成果。通过查阅相关文献资料,发现国内外许多硬件类远程实验平台的实验数据是由软件仿真得来,不能反映真实的实验情况,也无法结合真实的实验数据进行考核。本课题在对远程FPGA虚拟实验平台进行分析及研究的基础上,结
扭转体结构是一种楼面和立面随楼层高度扭转变化的结构形式。目前世界上存在许多扭转体结构工程上的实际应用,但还未出现对该结构的系统理论分析,本文将对高度方向上均匀扭转的结构进行整体性能研究,通过对单层和6层扭转体结构模型与对应的非扭转体结构模型的对比,分析扭转体结构的力学性能。论文的主要内容如下:1)建立单层扭转体结构和非扭转体结构的对比模型,用理论公式阐明扭转引起的框架柱内力变化,考察刚性楼板假设和
硕士学位论文《James空间及其上算子的有关问题》是泛函分析学科Banach空间理论与算子理论有机结合进行研讨的产物.本文共有三章内容:第一章介绍James空间研究的历史沿革.在引进与本论文相关的Banach空间理论预备知识的同时,取得关于Banach空间有收缩基和有特殊性质收缩基特征刻画的若干结果.本章对James空间的研究意义作了阐述,研究前景作了展望.第二章对James空间的结构作了新的探讨
随着工业化进程的加快,环境问题日益突出,本文采用光催化技术解决染料废水污染问题。磷酸银(Ag3PO4)是一种新型、高效的可见光催化剂,带隙约为2.4 e V,量子效率可达到90%,成为目前光催化的研究热点。Ag3PO4稳定性差的缺点严重制约了它的光催化活性,因此,本文着重对Ag3PO4进行改性来提高其稳定性和光催化活性。主要研究工作如下:1、通过原位沉淀法,成功地构建了含有氧空位且可响应可见光的Z
随着人们对室内热舒适性的要求逐渐提高,空调的使用日益普及。这加剧了城市电网的用电负荷,蓄冷空调技术因此受到重视。蓄冷空调系统利用低谷电制冷,高峰时段供应冷量,达到电力调峰的目的。水合物作为蓄冷工质,应用在蓄冷系统中,具有蓄冷量大、相变温度范围适用于常规制冷系统等优势,被广泛研究。但在实际应用中,水合物存在生成诱导时间较长、生成量不多等问题,这些问题是制约水合物蓄冷发展的关键因素。为此,从水合物相平
为减小建筑结构震后残余变形、降低震后修复成本,自复位结构随之诞生,即利用预应力概念实现结构震后自行复位,且结构主体构件保证处在弹性状态,而耗能通过增设辅助耗能元件以实现。课题组基于现有自复位结构,提出了“中震作用水平自复位,大震作用水平部分自复位”两阶段性能化设计目标的部分自复位结构体系,并对相关梁柱节点和框架中间层子结构进行了系列研究,而对框架结构体系的研究成果尚不完善。为系统研究BRS板耗能型
沥青路面的开裂是路面产生其他病害的根源,导致其开裂的原因有很多,其中低温开裂是绝大多数裂缝产生的主要原因之一。提升沥青混合料的低温抗裂性能,对提升沥青路面抗开裂能力,增强路用性能,延长路面服役寿命有很重要的作用。本文从提升沥青及其混合料性能两个方面来研究探讨提升接缝用SMA9.5沥青混合料的低温开裂能力的有效方法。对于沥青,采用不同的改性沥青的方法,即分别掺加SBS和纳米氧化锌改性剂的方法来提高其
近年来,膜分离技术受到研究者的青睐,膜分离在工业和农业等各个行业都占据着重要的位置。目前,膜分离不仅应用于污水处理,而且还用于能源,化学工业,生化和医药等各个领域。但是,由于常规膜的单一性和易被污染问题,其分离能力受到严重限制,不能满足于各种行业的使用。因此,具有可切换润湿性的各种智能表面在科学和工程界受到了广泛的关注和研究,主要是通过在膜基材上添加具有环境刺激响应的智能聚合物来制备智能膜。在这些
很多震害调查都可以表明,场地条件对震害的严重程度有很大的影响。不同场地条件对地震波不同频率成分的放大或者缩小的作用也不同,因而强震区的震害破坏性大得多。因此,研究场地条件对地震动峰值的影响至关重要。场地地震动峰值加速度调整系数Fa是结构抗震设计中用于考虑场地影响的重要参数,在我国的《建筑结构抗震设计规范(GB 50011-2010)》和《中国地震动区划图(GB 18306-2015)》中均有明确的
在装配式建筑结构中,节点是结构传力的中枢,是装配式结构中的关键部位。在火灾高温作用下,钢材性能弱化,节点承载力下降,当承载能力下降到一定程度时节点发生破坏。由于装配式节点的连接形式与传统焊接钢节点存在差异,其破坏部位与破坏形式也有明显的区别。因此,开展装配式钢牛腿节点的抗火性能和耐火保护方法研究,对确保该类节点在火灾下的安全具有重要意义和实用价值。本文针对改进型装配式钢牛腿节点,进行了6组ASTM