[2B1-OS-41d] OS-41

[2B1-OS-41d-02] Joint Action by Embodied LLM Agents with Theory of Mind

〇Koichiro Terao¹, Rikunari Sagara², Naoto Iwahashi¹ (1. Okayama Prefectural University, 2. University of Shizuoka)

Keywords:theory of mind, joint action, large language model

近年，AIシステムと人間の協調のあり方が重要な研究課題として注目されている．複数の主体が共通の目標に向けて相互作用しながら行動する共同行為を円滑に遂行するためには，タスク，役割，計画，知覚，および知識の共有が不可欠である．そこで本研究では，心の理論を有する身体化LLMエージェントによる自律的共同行為遂行手法の開発を目的とする．目的達成のため，次の二つの技術を提案する：1) Belief Nest: 身体化LLMエージェントに心の理論を付与するための，入れ子構造を持つ信念シミュレータモデル，2) ToM-PDCR: Belief Nestを活用し，身体化LLMエージェントが，シミュレータ内で内省的にPlan-Do-Check-Reflect の思考サイクルを繰り返すことにより，共同行為をオンラインで立案・調整する仕組み．本手法の有効性は，Minecraft環境における多様なタスクを対象にした実験により実証する。