清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Adaptive control for circulating cooling water system using deep reinforcement learning

控制理论(社会学) PID控制器 计算机科学 强化学习 控制系统 弹道 马尔可夫决策过程 马尔可夫过程 温度控制 控制工程 数学 物理 控制(管理) 工程类 人工智能 统计 天文 电气工程
作者
Jin Xu,Li Han,Qingxin Zhang
出处
期刊:PLOS ONE [Public Library of Science]
卷期号:19 (7): e0307767-e0307767 被引量:1
标识
DOI:10.1371/journal.pone.0307767
摘要

Due to the complex internal working process of circulating cooling water systems, most traditional control methods struggle to achieve stable and precise control. Therefore, this paper presents a novel adaptive control structure for the Twin Delayed Deep Deterministic Policy Gradient algorithm, which is based on a reference trajectory model (TD3-RTM). The structure is based on the Markov decision process of the recirculating cooling water system. Initially, the TD3 algorithm is employed to construct a deep reinforcement learning agent. Subsequently, a state space is selected, and a dense reward function is designed, considering the multivariable characteristics of the recirculating cooling water system. The agent updates its network based on different reward values obtained through interactions with the system, thereby gradually aligning the action values with the optimal policy. The TD3-RTM method introduces a reference trajectory model to accelerate the convergence speed of the agent and reduce oscillations and instability in the control system. Subsequently, simulation experiments were conducted in MATLAB/Simulink. The results show that compared to PID, fuzzy PID, DDPG and TD3, the TD3-RTM method improved the transient time in the flow loop by 6.09s, 5.29s, 0.57s, and 0.77s, respectively, and the Integral of Absolute Error(IAE) indexes decreased by 710.54, 335.1, 135.97, and 89.96, respectively, and the transient time in the temperature loop improved by 25.84s, 13.65s, 15.05s, and 0.81s, and the IAE metrics were reduced by 143.9, 59.13, 31.79, and 1.77, respectively. In addition, the overshooting of the TD3-RTM method in the flow loop was reduced by 17.64, 7.79, and 1.29 per cent, respectively, in comparison with the PID, the fuzzy PID, and the TD3.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
怕黑的妖丽完成签到,获得积分10
2秒前
哈哈一呀发布了新的文献求助10
5秒前
勤劳寒松完成签到,获得积分10
34秒前
坚定的咖啡完成签到,获得积分10
52秒前
tlh完成签到 ,获得积分10
56秒前
1分钟前
jiangxiang完成签到,获得积分20
1分钟前
坚定谷蕊完成签到,获得积分10
1分钟前
1分钟前
科研通AI65的应助被jiangxiang采纳,获得10
1分钟前
淡然雅彤完成签到,获得积分10
1分钟前
温柔的海秋完成签到,获得积分10
1分钟前
胡萝卜完成签到,获得积分10
2分钟前
强健的千柔完成签到,获得积分10
2分钟前
懦弱的绿蝶完成签到,获得积分10
2分钟前
闪闪小凡完成签到,获得积分10
2分钟前
Hello的应助被科研通管家采纳,获得10
3分钟前
包容大地完成签到,获得积分10
3分钟前
俊逸吐司完成签到 ,获得积分10
3分钟前
风吹麦浪的应助被时之王者采纳,获得10
3分钟前
优雅的树叶完成签到,获得积分10
3分钟前
昴星引路完成签到 ,获得积分10
3分钟前
含蓄的芝麻完成签到,获得积分10
3分钟前
3分钟前
STEAM完成签到,获得积分10
3分钟前
STEAM发布了新的文献求助20
3分钟前
Monica张完成签到 ,获得积分10
4分钟前
Aboo完成签到,获得积分10
4分钟前
尊敬康乃馨完成签到,获得积分10
4分钟前
乐乐的应助被STEAM采纳,获得10
4分钟前
紧张的幼蓉完成签到,获得积分10
4分钟前
5分钟前
5分钟前
文静飞松完成签到,获得积分10
5分钟前
修渊完成签到 ,获得积分10
5分钟前
温暖的大船完成签到,获得积分10
5分钟前
波爷完成签到,获得积分10
5分钟前
科研通AI6.3的应助被amiee采纳,获得10
6分钟前
lianxin完成签到 ,获得积分10
6分钟前
ABC完成签到 ,获得积分10
6分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8190226
求助须知:如何正确求助?哪些是违规求助? 9577354
关于积分的说明 21852358
捐赠科研通 7788708
什么是DOI,文献DOI怎么找? 3436310
关于科研通互助平台的介绍 2560092
邀请新用户注册赠送积分活动 2482902