研究の概念
立ち位置・顔の向き・声の方向をカメラとマイクから取得します。これらの身体的行動を用いて、対話を見ている人が対話に参加する状態へ移る過程を推定します。
概要
カメラとマイクから取得した身体的行動を用いて、自由な形式の対話における非参与者から参与者への状態遷移を推定する新しい手法を提案します。既存手法は参与者と発表者を扱っていますが、対話で重要な役割を果たす非参与者を考慮していません。認知科学の研究分野には、非参与者から参与者への変化の心理的側面を考慮した既存モデルがあります。しかし、非参与者の心理的側面を推定することは難しいため、このモデルの実装は困難です。提案手法では、心理的側面の代わりに、立ち位置、顔の向き、声の方向といった身体的行動を利用します。ポスター発表から収集したデータセットを用いて、状態遷移の推定性能を高めるために適した行動のパラメータを分析しました。
発表文献
- 神原 隆宏, 西山 正志, 岩井 儀雄,
対話型プレゼンテーションにおける非参与者から参与者への状態遷移推定,
ヒューマンインタフェース学会論文誌, Vol. 22, No. 1, pp. 13 - 24, February 2020. - Tatsuya Era, Hiroki Yoshimura, Masashi Nishiyama, Yoshio Iwai,
Inferring State Transition from Bystander to Participant in Free-style Conversational Interaction, Proceedings of 14th IEEE International Conference on Advanced Video and Signal based Surveillance (AVSS), pp. 1 - 6, August 2017.
紹介動画
