PHRIT: Parametric Hand Representation with Implicit Template

要約

我々は、パラメトリック メッシュと暗黙的表現の両方の利点を組み合わせた暗黙的テンプレートを使用したパラメトリック ハンド メッシュ モデリングの新しいアプローチである PHRIT を提案します。
私たちの方法では、部品ベースの形状事前分布を備えた符号付き距離フィールド (SDF) を使用して変形可能な手の形状を表現し、変形フィールドを利用して変形を実行します。
このモデルは、標準テンプレートを無限の解像度で変形することにより、効率的で忠実度の高い手の再構築を提供します。
さらに、完全に微分可能であり、スケルトンと形状の潜在コードによって駆動できるため、ハンド モデリングで簡単に使用できます。
私たちは、スケルトン駆動の手の再構築、点群からの形状、単一ビューの 3D 再構築など、複数の下流タスクで PHRIT を評価し、私たちのアプローチが最先端のパフォーマンスでリアルで没入型の手のモデリングを実現していることを実証しています。

要約(オリジナル)

We propose PHRIT, a novel approach for parametric hand mesh modeling with an implicit template that combines the advantages of both parametric meshes and implicit representations. Our method represents deformable hand shapes using signed distance fields (SDFs) with part-based shape priors, utilizing a deformation field to execute the deformation. The model offers efficient high-fidelity hand reconstruction by deforming the canonical template at infinite resolution. Additionally, it is fully differentiable and can be easily used in hand modeling since it can be driven by the skeleton and shape latent codes. We evaluate PHRIT on multiple downstream tasks, including skeleton-driven hand reconstruction, shapes from point clouds, and single-view 3D reconstruction, demonstrating that our approach achieves realistic and immersive hand modeling with state-of-the-art performance.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google