基于自注意力PPO算法的智能配电网多设备协同无功优化控制策略
作者机构:国网天津市电力公司城西供电分公司 天津大学电气自动化与信息工程学院
出 版 物:《智慧电力》 (Smart Power)
年 卷 期:2024年第10期
页 面:40-48页
学科分类:12[管理学] 1201[管理学-管理科学与工程(可授管理学、工学学位)] 080802[工学-电力系统及其自动化] 0808[工学-电气工程] 08[工学] 081104[工学-模式识别与智能系统] 0835[工学-软件工程] 0811[工学-控制科学与工程] 0812[工学-计算机科学与技术(可授工学、理学学位)]
基 金:国家自然科学基金资助项目(52277118) 国网天津市电力公司科技项目(城西-研发2023-01)~~
主 题:配电网 分布式光伏 电压无功控制 多头自注意力 近端策略优化算法
摘 要:针对智能配电网无功可调控资源多样化场景下的快速趋优难题,提出了一种基于多头自注意力近端策略优化算法的多设备协同无功优化控制方法。首先,将无功优化问题建模为马尔可夫决策过程;然后,在深度强化学习框架下使用多头自注意力改进近端策略优化(PPO)算法对策略网络进行优化训练,算法采用多头自注意力网络获取配电网的实时状态特征,并通过剪切策略梯度法动态控制策略网络的更新幅度;最后,在改进IEEE69节点系统进行仿真验证。结果表明,所提算法的控制性能优于现有先进强化学习算法。