[4M2] [General Session] 10. Vision / Speech

[4M2-03] Visual Relationship Detection Guided by Region-object Relevance

〇Yusuke Goutsu¹ (1. National Institute of Advanced Industrial Science and Technology)

Keywords:Visual relationship detection, Object detection

物体関係検出とは，画像中に複数ある物体の位置とラベルの推定に加えて物体ペア群の関係ラベルまで推定するタスクである．従来の画像認識に沿った手法では，このタスクに対して物体や関係の種類が多くなると扱いにくくなるという欠点があった．しかし，物体検出が発展してきたおかげで，物体と関係のクラス分類問題にそれぞれ帰着できるようになった．本研究では，このタスクを物体ペアに対する関係に適切なラベルを割り当てる問題として目的関数の設計を行い，設計における指針として，物体検出により得られる物体ラベルと画像中の物体領域の関連性に着目した．提案手法に対して物体関係検出用のアノテーションを含む大規模データセットを用いた評価実験を行い，物体ペアに関連する画像領域から取り得る関係のみを考慮することで，高い推定精度が実現できることを確認する．