基于安全强化学习算法的电动汽车充电调度策略

摘要

随着电动汽车数量的增加，强化学习在电动汽车充电调度中面临更多挑战，尤其是大规模应用带来的不确定性和维度灾难问题.针对上述问题，构建了一个居民区微电网模型，综合考虑电动汽车入网模式及其多种非线性充电模型.将充电调度问题建模为一个约束马尔可夫决策过程，并采用无模型的强化学习框架处理不确定性.针对维度灾难问题，设计了一种充放电策略，通过将电动汽车根据状态划分为不同集合，并由智能体向集合发送控制信号，从而减少动作空间维度.随后，利用基于拉格朗日约束的深度确定性策略梯度算法求解充电调度问题，同时引入安全过滤器以确保不违反硬性约束.数值仿真验证了该策略的有效性.

关键词

电动汽车 / 充电调度 / 安全强化学习 / 电动汽车入网模式 / 非线性充电