[3D4-OS-20a] OS-20

[3D4-OS-20a-04] Prediction of Romantic Scale in Speed Dating Using Verbal and Nonverbal Behaviors in Conversation

〇Ryusei Kimura¹, Takato Hayashi¹, Hiroto Horimoto¹, Ryo Ishii², Shogo Okada¹ (1. Japan Advanced Institute of Science Technology, 2. NTT Corporation )

Keywords:Social Signal Processing, Multimodal

新たなパートナーを見つけるために，スピードデーティングがよく行われている．相手を好んでいる度合いである恋愛尺度の得点を事前に予測することができれば，相性の良いパートナーを効率的に見つけることができる．対話時の言語・非言語情報は恋愛の形成において重要な役割を果たすため，好意・愛情の予測においても有益な情報であると考えられる．そこで本研究では，スピードデーティング時の対話情報を用いて，パートナーに抱く好意・愛情の予測モデルを提案する．予測モデルの特徴量として用いる対話情報には，対話中の表情や韻律，発話内容，動作などが含まれている．提案手法では過去の対話データから言語・非言語情報の個人性を獲得する．そして，これらの情報から個人がスピードデーティングにおいてどのような印象を持たれやすいか，またどのような相手に好意・愛情を抱きやすいかという傾向を機械学習モデルによって捉え，対話を行っていないペア間の好意・愛情を予測する．実験の結果，提案手法はペア間の好意・愛情を予測可能であることが明らかになった．また，本研究では好意・愛情の予測に寄与した言語・非言語情報についても分析を行った．