清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Optimal tracking control of batch processes with time-invariant state delay: Adaptive Q-learning with two-dimensional state and control policy

计算机科学 国家(计算机科学) 增强学习 不变(物理) 控制(管理) 跟踪(教育) 控制理论(社会学) LTI系统理论 人工智能 强化学习 算法 数学 线性系统 心理学 数学分析 教育学 数学物理
作者
Huiyuan Shi,Mengdi Lv,Xueying Jiang,Chengli Su,Ping Li
出处
期刊:Engineering Applications of Artificial Intelligence [Elsevier BV]
卷期号:132: 108006-108006 被引量:4
标识
DOI:10.1016/j.engappai.2024.108006
摘要

Given that conventional model-based control methods have some limitations for dynamic systems with unknown model parameters and existing reinforcement learning methods do not take batch and time delay information into account, a novel data-based adaptive Q-learning approach with two-dimensional (2D) state and control policy is proposed to address the optimal tracking control issue for batch processes with time-invariant state delay. The extended delay state space equation, value function, Q function and optimal performance index are initially presented along the time and batch directions. By examining the correlation between the 2D value function and the 2D Q function, a delay-dependent 2D Bellman equation is designed independent of the process model, which is solved to obtain the expression of the control law. Without requiring prior knowledge of the system, the optimal gain matrices of the control law are further learned by using the current and historical state, output error values and time delay information of the timewise and batchwise. It is feasible to achieve accelerated convergence and reduced errors between the optimal control gain matrices and the learning gain matrices, hence enhancing the tracking capabilities of the systems. At the same time, the unbiasedness and convergence of the given adaptive Q-learning approach are strictly proved. The effectiveness of the proposed algorithm is ultimately validated by simulation comparisons of injection molding, specifically regarding the convergence of control gains and the tracking of output.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
灵巧怀曼完成签到,获得积分10
3秒前
yan完成签到,获得积分10
11秒前
美满尔蓝完成签到,获得积分10
12秒前
dianeil发布了新的文献求助10
15秒前
舒适的妍完成签到,获得积分10
15秒前
丰富广缘完成签到,获得积分10
18秒前
求求了给篇文献完成签到,获得积分10
22秒前
温暖友易完成签到,获得积分10
22秒前
2s完成签到,获得积分10
24秒前
24秒前
腼腆的冰安完成签到,获得积分10
26秒前
顺利毛豆完成签到,获得积分10
27秒前
陈微完成签到,获得积分10
27秒前
2s发布了新的文献求助10
29秒前
能毕业就行完成签到,获得积分10
30秒前
单薄飞双完成签到,获得积分10
32秒前
苏苏完成签到,获得积分10
32秒前
张永和完成签到,获得积分10
34秒前
威武的成协完成签到,获得积分10
35秒前
无情捕完成签到,获得积分10
36秒前
科研绿老头完成签到,获得积分10
41秒前
小蘑菇的应助被科研通管家采纳,获得10
43秒前
null的应助被科研通管家采纳,获得10
43秒前
深情安青的应助被科研通管家采纳,获得10
43秒前
null的应助被科研通管家采纳,获得10
43秒前
周新哲完成签到,获得积分10
43秒前
Muth完成签到,获得积分10
45秒前
dingyushu完成签到,获得积分10
45秒前
ZF完成签到,获得积分10
45秒前
WULAVIVA完成签到,获得积分10
47秒前
2dingyushu完成签到,获得积分10
50秒前
仇敌克星完成签到,获得积分10
51秒前
baa完成签到,获得积分10
51秒前
du完成签到,获得积分10
52秒前
zheng完成签到,获得积分10
53秒前
Beto发布了新的文献求助10
54秒前
慢波完成签到,获得积分10
55秒前
9dingyushu完成签到,获得积分10
55秒前
秋风之墩完成签到,获得积分10
56秒前
踏实远山完成签到,获得积分10
56秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
八旗制度の研究 600
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8185411
求助须知:如何正确求助?哪些是违规求助? 9574140
关于积分的说明 21834410
捐赠科研通 7782895
什么是DOI,文献DOI怎么找? 3434567
关于科研通互助平台的介绍 2558844
邀请新用户注册赠送积分活动 2481280