[2N5-OS-7a] 人間と共生する対話知能(1/2)

[2N5-OS-7a-01] (OS invited talk) Towards realization of multimodal conversational robots

〇Takayuki Nagai¹ (1. Osaka University)

Keywords:Dialogue system, Multimodal, Robot

近年、雑談を始めとする対話システムの性能が大きく向上している。対話システムがロボットに搭載される場合、ロボットは音声発話だけでなく表情やジェスチャなど複数の出力チャネルを持つことになる。また、様々なセンサを用いることで、入力もマルチモーダル信号となる。こうしたマルチモーダル対話システムを構築するためにはマルチモーダル情報が揃ったデータセット必要になるが、モダリティが増えるほどデータの収集が困難になる。本講演では、こうした問題を解決するために取り組んだマルチモーダル統合技術について述べると共に、マルチモーダル対話ロボットの課題について議論する。