身体動揺の高周波成分を可視化する動き増幅映像の生成

人体の微小な動きを観察するため、アーティファクトを生じさせずに、映像の時間方向の高周波成分を強調する手法を提案します。 既存の映像動き増幅手法では、入力映像から人物の時間的な微小動作と空間的な見えを安定して分離できないため、強調後の映像に大きなアーティファクトが生じます。 アーティファクトの多い強調映像では、観察者は身体動揺の高周波成分を十分に確認できません。 そこで、人物の頭部に含まれるすべての画素で、時間的な微小動作が共通であると仮定します。 提案手法では、映像を時間的な微小動作と空間的な見えに安定して分離します。 その後、時間的な微小動作の高周波成分を増幅します。 実験の結果、提案手法はアーティファクトを生じさせずに身体動揺の映像を強調できました。 強調後の映像で高周波成分を観察できることを確認しました。 また、提案手法の応用として、身体動揺の映像を用いた手荷物の重さの分類が成功または失敗した理由を可視化しました。

• 頭上カメラから観測される身体動揺の解析のためのアーティファクトを抑えた映像の動き増幅

• 身体動揺を用いた人物画像認識 （高校生向け研究紹介）