[4Pin1] インタラクティブ(2)

[4Pin1-12] 離散および連続的動作空間における深層強化学習を用いたスマートアネルギーシステムの最適化

〇曽我部 東馬¹、Dinesh Malla¹、高山 将太¹、坂本 克好¹、山口 浩一¹、Singh Thakur²、曽我部 完² (1. 国立大学法人　電気通信大学、2. （株）　グリッド)

キーワード：深層強化学習、連続動作、離散動作

マートグリッドにおけるエネルギー最適化は、State of art深層学習や深層強化学習に代表されるエージェントベースの機械学習手法に徐々に移行している。特に、強化学習手法をベースにした深層ニューラルネットワークが出現し、スマートグリッドへの応用に人気を集めている。本研究では、離散的動作空間および連続的動作空間の両方に対応するようデザインされた2つの深層強化学習アルゴリズムの応用を試みた。これらのアルゴリズムは、スマートグリッドの最適化を目的に、Simscape Power SystemsTM（Matlab / SimulinkTM Environment）を構築することで厳密な物理モデルによく組み込まれた。結果として、エージェントは訓練データにおけるエネルギーの需要と供給の機能を非常