[論文レビュー] Motion Similarity Modeling -- A State of the Art Report

Anna Sebernegg, Peter Kán+1 more|arXiv (Cornell University)|Aug 13, 2020

Human Pose and Action Recognition参考文献 60被引用数 6

ひとこと要約

本報告は、3次元モーションキャプチャデータに焦点を当てた、人体運動解析におけるモーション類似性モデリングの包括的サーベイを提供している。モーション特徴の分類、類似性測定法（ユークリッド距離、クォータニオンノルム、動的時間ワープ（DTW））の評価、およびモーションリtrieval、リハビリテーション、アニメーションなどのタスクにおける次元削減、時間的整合、特徴選択の応用固有のトレードオフを議論している。

ABSTRACT

The analysis of human motion opens up a wide range of possibilities, such as realistic training simulations or authentic motions in robotics or animation. One of the problems underlying motion analysis is the meaningful comparison of actions based on similarity measures. Since the motion analysis is application-dependent, it is essential to find the appropriate motion similarity method for the particular use case. This state of the art report provides an overview of human motion analysis and different similarity modeling methods, while mainly focusing on approaches that work with 3D motion data. The survey summarizes various similarity aspects and features of motion and describes approaches to measuring the similarity between two actions.

研究の動機と目的

• 3次元人体運動データのためのモーション類似性モデリング技術について、体系的な概要を提供すること。
• グローバル変換、コンテンツ対スタイル、部分的類似性などの、類似性の主要な側面を特定・分類すること。
• ポーズ、遷移、アクティビティの各特徴が類似性モデリングにおいて果たす強みと限界を評価すること。
• 局所的およびグローバル類似性測定法（DTW、クォータニオンベースの指標、ルールベースの手法など）を比較すること。
• リアルタイムフィードバックやデータ集約的解析などの応用ニーズに応じて、適切な類似性モデルを選定するためのガイダンスを提供すること。

提案手法

• 人体寸法、ポーズ（関節角、距離、関係性、シルエットベース）、遷移（速度、加速度、運動的性質）、アクティビティ特徴に分類されたモーション特徴を提示する。
• 局所的類似性測定法のレビュー：オイラー角のユークリッド距離、単位クォータニオンの差のノルム、単位クォータニオンの内積、単位球面上の測地的距離。
• グローバル類似性手法の分析：動的時間ワープ（DTW）による時間的整合、曲線表現に基づく類似性、ルールベースのアプローチ。
• 次元削減技術（主成分分析（PCA）と自己組織化マップ（SOM））を用いたモーションデータの前処理の評価。
• リハビリテーションなどの応用でリアルタイムフィードバックを実現するため、テンプレートベースとルールベースのモデルを統合したハイブリッドアプローチの検討。
• 変動長のモーションシーケンスの処理のための手法比較：DTWおよびその反復的マルチスケール変種（IMDTW）を用い、時間的構造の保持を目的とする。

実験結果

リサーチクエスチョン

• RQ1 2つの人体運動が類似するとされる際の、主な類似性の側面とは何か？
• RQ2 ポーズ、遷移、アクティビティの各モーション特徴は、効果的な類似性モデリングにどのように寄与するか？
• RQ3 精度、耐障害性、計算コストの観点から、局所的類似性測定法とグローバル類似性測定法の間にはどのようなトレードオフがあるか？
• RQ4 次元削減および時間的整合技術は、高次元モーションデータにおける類似性測定をどのように改善できるか？
• RQ5 どのような状況で、テンプレートベースのアプローチよりもルールベースのモデルがモーション類似性評価に適しているか？

主な発見

• 回転データに対しては、オイラー角に基づくユークリッド距離よりも、単位クォータニオンの差のノルムや、単位球面上の測地的距離の方が、より耐障害性に優れている。
• 動的時間ワープ（DTW）は、長さが異なるモーションシーケンスの処理に広く採用されているが、最適化が不十分な場合には情報損失や高コストな実行時間が生じる可能性がある。
• ルールベースのアプローチは、事前に定義された正しさのルールと照合することでリアルタイムフィードバックを可能にし、リハビリテーションや運動モニタリングに適している。
• 特徴選択は類似性性能に顕著な影響を与える：関係性ベースおよびシルエットベースのポーズ特徴は、ノイズや視点変化に対してより耐性がある。
• PCA や SOM などの次元削減技術の統合により、高次元モーションデータの管理が可能になり、同時に重要な運動特性を保持できる。
• 万能な類似性モデルは存在しない。最適な選択は、リアルタイム処理、データ量、望ましい類似性の粒度といった、応用固有の要件に依存する。