不确定性环境下园区风光储互动运行的PPO强化学习策略
CSTR:
作者:
作者单位:

(1. 国网电力科学研究院有限公司(南瑞集团有限公司),南京 210000;2. 国网电力科学研究院武汉能效测评有限公司,武汉 430074)

作者简介:

王振宇(1984),男,湖北武汉人,博士,高级工程师,主要从事负荷管理与能效、碳效优化工作。

通讯作者:

中图分类号:

基金项目:

国家电网有限公司科技项目(5100-202114296A-0-0-00)


PPO-based reinforcement learning strategy for interactive operation of wind-photovoltaic-storage in an uncertain environment
Author:
Affiliation:

(1. Nari Group Corporation(State Grid Electric Power Research Institute), Nanjing 210000, China;2. State GridElectric Power Research Institute Wuhan Energy Efficiency Evaluation Company, Wuhan 430074, China)

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    随着能源结构的不断升级,部署有新能源发电的新型园区将在未来新型电力系统中扮演重要的角色。需求的随机性、风光出力的间歇性、电力市场电价的波动性等不确定性因素耦合在一起,使得风光能源与电池储能系统的合理互动运行变得十分困难。考虑到传统优化方法的局限性,提出了一种基于PPO算法的深度强化学习方法,用于解决不确定环境下园区风光储互动运行问题。基于强化学习的理论框架,为园区互动运行构建了一个具有连续状态空间和连续动作空间且转移概率未知的马尔可夫决策模型,通过与新型负荷控制系统对接的能源管理系统控制园区微电网中的电池储能系统及柔性资源,在充分考虑电池退化成本的基础上,实现园区经济运行。

    Abstract:

    With the continuous upgrading of the energy structure, the new parks with new energy power generation will play an important role in the future new power system. Uncertainties such as the randomness of demand, intermittency of wind and solar output, and volatility of electricity prices in electricity market are coupled together, making it difficult to achieve the reasonable operation between wind and solar energy and battery energy storage system. Considering the limitations of traditional optimization methods, a deep reinforcement learning method based on the PPO algorithm is proposed to solve the problem of interactive operation of wind-solar-storage in parks under uncertain environments. Based on the theoretical framework of reinforcement learning, a Markov decision model with continuous state space and continuous action space and unknown transition probability is constructed for the interactive operation of the park. The new load control system controls the battery energy storage system and flexible resources in the microgrid of the park to realize the economic operation, fully considering battery degradation.

    参考文献
    相似文献
    引证文献
引用本文

王振宇,许 静,胡文博,齐 蓓,万长瑛.不确定性环境下园区风光储互动运行的PPO强化学习策略[J].电力需求侧管理,2022,24(5):44-50

复制
分享
相关视频

文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2022-06-08
  • 最后修改日期:2022-08-02
  • 录用日期:
  • 在线发布日期: 2022-09-27
  • 出版日期:
文章二维码