BlazePose GHUM Holistic: Real-time 3D Human Landmarks and Pose Estimation

要約

BlazePose GHUM Holisticは、3D人体ランドマークとポーズ推定のための軽量ニューラルネットワークパイプラインであり、特にリアルタイムのデバイス上の推論に合わせて調整されています。
BlazePose GHUM Holisticは、アバターコントロール、フィットネストラッキング、AR/VR効果を含む単一のRGB画像からのモーションキャプチャを可能にします。
私たちの主な貢献には、i）3Dグラウンドトゥルースデータ取得の新しい方法、ii）追加の手のランドマークを使用した更新された3Dボディトラッキング、およびiii）単眼画像からの全身ポーズ推定が含まれます。

要約(オリジナル)

We present BlazePose GHUM Holistic, a lightweight neural network pipeline for 3D human body landmarks and pose estimation, specifically tailored to real-time on-device inference. BlazePose GHUM Holistic enables motion capture from a single RGB image including avatar control, fitness tracking and AR/VR effects. Our main contributions include i) a novel method for 3D ground truth data acquisition, ii) updated 3D body tracking with additional hand landmarks and iii) full body pose estimation from a monocular image.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google