强化学习优化风电场数据中心能耗的研究

Toward an Energy-Optimized Operation of Data Centers Located in Wind Farms Using Reinforcement Learning

精选理由

这篇论文用强化学习让风电场数据中心更省电,在单机场景下比较了PPO和SAC的效果,还试了模仿学习和奖励塑造。

AI 摘要

该论文研究了强化学习作为在线控制器,用于风电场内数据中心的高性能计算(HPC)工作负载转移。使用固定日仿真框架结合合成风能和电价信号以及延迟完成反馈进行测试。在单个风轮机和单个数据中心的基准场景中,纯强化学习存在信用分配问题,早期白天未能充分利用免费风能。评估了两种互补措施:基于优化的模仿学习和基于势能的奖励塑造。在200天测试集上,PPO和SAC变体表现出色,但性能仍低于具有全局视野的优化器。

AI 翻译 · 中文

该论文研究了强化学习作为在线控制器,用于风电场内数据中心的高性能计算(HPC)工作负载转移。使用固定日仿真框架结合合成风能和电价信号以及延迟完成反馈进行测试。在单个风轮机和单个数据中心的基准场景中,纯强化学习存在信用分配问题,早期白天未能充分利用免费风能。评估了两种互补措施:基于优化的模仿学习和基于势能的奖励塑造。在200天测试集上,PPO和SAC变体表现出色,但性能仍低于具有全局视野的优化器。

arXiv cs.LGThis paper studies Reinforcement Learning as an online controller for curtailment-aware workload shifting in wind-turbine-integrated high-performance computing (HPC) data centers. We introduce a reproducible fixed-day si