基于PPO算法的CIES低碳优化调度方法

作     者：陈凡 吴凌霄 王曼 吕干云 张小莲 CHEN Fan;WU Lingxiao;WANG Man;LYU Ganyun;ZHANG Xiaolian

作者机构：南京工程学院电力工程学院江苏南京211167 

出 版 物：《电力工程技术》 (Electric Power Engineering Technology)

年 卷 期：2024年第43卷第6期

页      面：88-99页

学科分类：080802[工学-电力系统及其自动化] 0808[工学-电气工程] 08[工学] 

基　　金：国家自然科学基金资助项目(51977103) 

主　　题：园区综合能源系统(CIES) 优化调度 近端策略优化(PPO)算法 阶梯式碳交易机制 惩罚系数 碳排放 

摘      要：阶梯式碳交易机制以及优化调度模型求解算法是进行园区综合能源系统(community integrated energy system,CIES)优化调度的重要因素,现有文献对这两个因素的考虑不够全面。为此,文中在考虑阶梯式碳交易机制的基础上,提出采用近端策略优化(proximal policy optimization,PPO)算法求解CIES低碳优化调度问题。该方法基于低碳优化调度模型搭建强化学习交互环境,利用设备状态参数及运行参数定义智能体的状态、动作空间及奖励函数,再通过离线训练获取可生成最优策略的智能体。算例分析结果表明,采用PPO算法得到的CIES低碳优化调度方法能够充分发挥阶梯式碳交易机制减少碳排放量和提高能源利用率方面的优势。