[1H5-GS-10] 画像・音声: 認識・検出

[1H5-GS-10-05] 保育施設における行動検出・理解のための映像データセット構築

〇飯田 啓太¹、汪 雪婷¹、山崎 俊彦¹、鳥海 哲史²、林 幹久²、野澤 祥子¹、高橋 翠¹、廣戸 健悟¹、遠藤 利彦¹、秋田 喜代美¹ (1. 東京大学、2. 株式会社フューチャースタンダード)

キーワード：行動検出、行動理解、データセット

近年、映像から複数の人間を同時に検出し、それぞれの取っている行動を推定する、映像からの行動検出が注目されている。これまでにも映像から様々な方法によってその特徴量を抽出し、これを元に推定を行うモデルが複数提案されてきた。

しかし、行動検出のためのデータセット構築ではフレームごとに複数の領域を作り、それぞれにラベルをつける必要があるためコストが大きい。このため、特定の分野の解析を目標としたデータセットの作成についてはあまり取り組まれていなかった。

本稿では、保育施設で撮影したビデオを元にした、行動検出・理解のための新たな映像データセットを提案する。このデータセットではより深い行動理解のため、環境との相互作用にも重点を置いたラベル付けを行っている。このことによって詳細な解析を可能にし、子供たちの活動のより深い行動理解に繋がることが期待される。