辽宁石油化工大学学报
复杂系统智能控制专栏 栏目所有文章列表
(按年度、期号倒序)

    一年内发表的文章 |  两年内 |  三年内 |  全部

Please wait a minute...
选择: 显示/隐藏图片
基于 Q学习的异构多智能体系统最优一致性
程薇燃, 李金娜
辽宁石油化工大学学报    2022, 42 (4): 59-67.   DOI: 10.3969/j.issn.1672-6952.2022.04.011
摘要210)   HTML12)    PDF (674KB)(552)    收藏

对有领导者的异构离散多智能体系统的最优一致性问题,提出了一种无模型的基于非策略强化学习的控制协议设计方法。由于异构多智能体系统的状态矩阵不同,其局部邻居误差的动态表达式比较复杂。与现有的多智能体系统分布式控制方案相比,所提算法减少了计算的复杂性。首先,建立由增广变量构造的多智能体系统全局邻居误差动态表达式。其次,通过二次型形式的值函数得到耦合贝尔曼方程和Hamilton?Jacobi?Bellman(HJB)方程。再次,求解耦合HJB方程的最优解,得到多智能体最优一致性的纳什均衡解,并给出纳什均衡证明。从次,基于无模型的非策略Q学习算法,求解多智能体最优一致性的纳什均衡解。最后,利用批判神经网络结构,结合梯度下降法实现了所提出的算法,并通过仿真实例验证了算法的有效性。

图表 | 参考文献 | 相关文章 | 多维度评价