2022年度 人工知能学会全国大会(第36回)

講演情報

インタラクティブセッション

一般セッション » インタラクティブセッション

[3Yin2] インタラクティブセッション1

2022年6月16日(木) 11:30 〜 13:10 Y会場 (Event Hall)

[3Yin2-23] ペン先の軌跡から説明者の意図を反映した画像キャプション生成

〇渡邊 清子1、小林 一郎1 (1.お茶の水女子大学)

キーワード:キャプション生成、文長制御、コントロールシグナル

近年,画像キャプション生成の研究は画像に対する前処理から得られた情報を元に画像キャプションを生成するだけでなく,画像処理情報に対して,コントロールシグナルと呼ばれる視点に相当する追加情報を与えることで,画像に対してユーザの興味に基づくキャプションを生成する研究へと発展している.画像の概要を説明する際に,人は大抵,指でその領域を指しながら画像内の情報を伝える.また,その領域をより詳細に説明したい時は,その領域に指を滞在させる時間を増やした説明を行う.また,このような行為で生じる指差しの軌跡のことをトレースと呼ぶ.そのようなトレースの意図を反映して,画像内の注目箇所と説明文の詳述さをコントロールする,説明者の意図に沿った画像キャプション生成手法を開発する.

講演PDFパスワード認証
論文PDFの閲覧にはログインが必要です。参加登録者の方は「参加者用ログイン」画面からログインしてください。あるいは論文PDF閲覧用のパスワードを以下にご入力ください。

パスワード