[21a-C201-1~11] FS.1 Focused Session "AI Electronics"

[21a-C201-7] Performance Evaluation of Reinforcement Learning a Model Based on Reservoir Computing Considering Nonlinear Write Characteristics of Analog Memory

〇(M2)Katsunori Tamai¹, Hakaru Tamukoh^1,2, Yuichi Katori³, Osamu Nomura^1,2, Takashi Morie^1,2 (1.Kyushu Inst. Tech., 2.Neumorph Center, 3.Future Univ. Hakodate.)

Keywords:reservoir, analog memory, reinforcement learning

強化学習等の多値荷重を必要とするニューラルネットワークの集積回路実装はメモリ素子の様々な課題が原因でほとんど報告されていない．本研究ではリザバー強化学習モデルを用いて，その課題の1つである非線形書き込み特性を理想化しシミュレーションに組込み，モデルの学習性能を評価した．結果は想定した条件下で学習性能を著しく低下させることはないものの，飽和的な特性による学習回数の増加傾向がみられた．