考虑区域间辅助奖励的配电网电压优化控制

作     者：周祥 李晓露 柳劲松 林顺富 ZHOU Xiang;LI Xiaolu;LIU Jinsong;LIN Shunfu

作者机构：上海电力大学电气工程学院上海市200090 国网上海市电力公司电力科学研究院上海市200437 

出 版 物：《电力建设》 (Electric Power Construction)

年 卷 期：2024年第45卷第5期

页      面：80-93页

核心收录：

学科分类：080802[工学-电力系统及其自动化] 0808[工学-电气工程] 08[工学] 

基　　金：国家自然科学基金项目(51977127) 

主　　题：多智能体深度强化学习 电压优化 辅助奖励 演化博弈 参与因子 

摘      要：智能软开关能够有效解决分布式光伏大规模接入配电网引起的电压波动问题,但会导致区域间协作程度加深,而现阶段使用多智能体深度强化学习算法进行电压优化时,各智能体仅使用各自区域内的奖励进行训练,导致智能体缺乏协同,输出策略难以保证最优性。为此提出考虑区域间辅助奖励的配电网电压优化方法,首先建立基于多智能体深度强化学习的多时间尺度电压优化框架,其次针对控制智能软开关的智能体,将各自区域内奖励定义为主奖励,邻近区域内奖励定义为辅助奖励,然后通过主、辅助奖励损失函数关于网络参数梯度的数量积分析辅助奖励对训练的有利程度,并采用演化博弈方法自适应修改辅助奖励参与因子;最后,在改进的IEEE 33节点系统验证了所提方法能够稳定智能体训练过程,提升智能体策略的优化效果。