Optimal Synchronization Control of Heterogeneous Asymmetric Input-Constrained Unknown Nonlinear MASs via Reinforcement Learning

汉密尔顿-雅各比-贝尔曼方程 强化学习 正确性 计算机科学 趋同(经济学) 数学优化 同步(交流) 非线性系统 观察员(物理) 状态空间 国家(计算机科学) 控制理论(社会学) 最优控制 数学 控制(管理) 人工智能 算法 计算机网络 频道(广播) 统计 物理 量子力学 经济 经济增长
作者
Lina Xia,Qing Li,Ruizhuo Song,Hamidreza Modares
出处
期刊:IEEE/CAA Journal of Automatica Sinica [Institute of Electrical and Electronics Engineers]
卷期号:9 (3): 520-532 被引量:58
标识
DOI:10.1109/jas.2021.1004359
摘要

The asymmetric input-constrained optimal synchronization problem of heterogeneous unknown nonlinear multiagent systems (MASs) is considered in the paper. Intuitively, a state-space transformation is performed such that satisfaction of symmetric input constraints for the transformed system guarantees satisfaction of asymmetric input constraints for the original system. Then, considering that the leader's information is not available to every follower, a novel distributed observer is designed to estimate the leader's state using only exchange of information among neighboring followers. After that, a network of augmented systems is constructed by combining observers and followers dynamics. A nonquadratic cost function is then leveraged for each augmented system (agent) for which its optimization satisfies input constraints and its corresponding constrained Hamilton-Jacobi-Bellman (HJB) equation is solved in a data-based fashion. More specifically, a data-based off-policy reinforcement learning (RL) algorithm is presented to learn the solution to the constrained HJB equation without requiring the complete knowledge of the agents' dynamics. Convergence of the improved RL algorithm to the solution to the constrained HJB equation is also demonstrated. Finally, the correctness and validity of the theoretical results are demonstrated by a simulation example.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
含蓄平蓝完成签到 ,获得积分10
刚刚
1秒前
安静的幻天完成签到 ,获得积分10
1秒前
小蔡完成签到 ,获得积分10
1秒前
俏皮眼睛完成签到 ,获得积分10
1秒前
1秒前
冷酷成风完成签到,获得积分10
1秒前
爆爆完成签到 ,获得积分10
1秒前
2秒前
突突突完成签到 ,获得积分10
2秒前
2秒前
大大大大大番薯完成签到,获得积分10
3秒前
Fei完成签到 ,获得积分10
3秒前
4秒前
YJO10发布了新的文献求助10
5秒前
Pan完成签到,获得积分10
5秒前
内向问寒发布了新的文献求助10
5秒前
gx发布了新的文献求助10
6秒前
yuko完成签到 ,获得积分10
6秒前
胡萝卜须发布了新的文献求助10
6秒前
6秒前
勤劳的瑀完成签到,获得积分10
6秒前
gengssss完成签到,获得积分10
7秒前
7秒前
moika发布了新的文献求助10
7秒前
8秒前
Fin完成签到 ,获得积分10
8秒前
王敏完成签到 ,获得积分10
8秒前
雪松完成签到 ,获得积分10
8秒前
阔达的海完成签到,获得积分10
8秒前
可可完成签到,获得积分10
9秒前
fantastic完成签到,获得积分10
9秒前
11秒前
友好的广缘完成签到,获得积分10
11秒前
南歪歪发布了新的文献求助10
12秒前
搜集达人的应助被Kannan采纳,获得10
12秒前
JESSE完成签到,获得积分10
13秒前
13秒前
14秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
Resource Recovery Handbook 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8175085
求助须知:如何正确求助?哪些是违规求助? 9566900
关于积分的说明 21788974
捐赠科研通 7769484
什么是DOI,文献DOI怎么找? 3431808
关于科研通互助平台的介绍 2556054
邀请新用户注册赠送积分活动 2477222