[1D5-GS-10] AI応用：移動

[1D5-GS-10-03] GIS データと街路画像を用いたLLMによる交通リスクの説明

〇三村 崚太¹、下村 晃太^2,3、石川 敦也¹、伊藤 修¹、大森 一祥²、下垣内 隆太²、若林 怜帆人²、井上 顧基² (1. 株式会社本田技術研究所、2. 株式会社Elith、3. 中部大学)

キーワード：地理情報システム、地理空間データ、大規模言語モデル

運転支援システムや自動運転技術における交通リスクの考慮は、交通事故防止において重要である。交通リスクは画像情報に多く含まれていると考えられる。しかし、画像情報のみから走行シーンに含まれる交通リスクを説明することは困難であり、この分野の研究はまだ十分に進展していない。本研究では、GISデータと街路画像を入力とした、交通リスクを説明可能なマルチモーダルフレームワークを提案する。このフレームワークは、GISデータに基に作成された交通事故リスクマップから高リスク地域の座標を特定し、その地域に関連する街路画像を用いて、マルチモーダルネットワークを学習する。これにより、任意のシーンにおける交通リスクを効果的に説明するフレームワークを構築する。実験結果から、提案されたフレームワークは、GISデータに基づく高リスク地域に対して、交通リスクを考慮したキャプションを生成できることが示された。