【讲座题目】对电力市场负荷服务实体的联合投标与定价的深度强化学习

【讲座时间】2019年12月16日（星期一）上午10:30

【讲座地点】保定校区 教一楼 217

【主 讲 人】Hongbo Sun，美国三菱电机研究所高级首席研究科学家

【主讲人简介】

Hongbo Sun，在重庆大学获得电气工程博士学位，现任美国三菱电机研究所高级首席研究科学家，在加入三菱电机研究所之前，他曾先后担任过重庆大学的全职教授、Oracle 的首席应用工程师、SPL 的技术架构师。他参与编著了一本书籍专著，并发表 110 余篇论文，并获得 25 项专利。他的研究方向包括电力系统的运行和控制、电力系统的规划和分析、智能电网的应用。

【内容简介】

在本次报告中，主讲人将对负荷服务实体联合在电力批发市场进行能源投标和在零售电力市场能源定价的问题进行讲解。联合投标和定价问题被构建为具有连续状态和行为空间的马尔可夫决策过程，其中，能源投标和能源定价是两个具有共同目标的行为。应用深度确定性策略梯度算法来求解此马尔可夫决策过程，以获取最佳的投标和定价策略。然而，深度确定性策略梯度算法通常需要大量的状态转换样本，导致很高的计算成本。为此，应用神经网络从历史数据中学习动态报价和价格响应函数，去分别构建电力批发市场和终端用户集体行为的模型。这些响应函数可准确捕获批发电力市场出清结果与终端用户的响应之间的时间相关性，并可用于生成状态转换样本，而无需任何计算成本。更重要的是，响应函数还为马尔科夫决策过程中的状态选择提供了信息。本报告还通过一个算例将说明所提出方法的有效性。