IntegratedPIFu: Integrated Pixel Aligned Implicit Function for Single-view Human Reconstruction

要約

私たちは、PIFuHD によって設定された基盤上に構築される新しいピクセル位置合わせ暗黙的モデルである IntegratedPIFu を提案します。
IntegratedPIFu は、ピクセル位置合わせされた暗黙的モデルで深度と人間による解析情報がどのように予測され、活用されるかを示します。
さらに、IntegratedPIFu は深度指向サンプリングを導入しています。これは、ノイズの多いアーティファクトを発生させずに人間の重要な特徴を再構築する、ピクセル位置合わせされた暗黙的モデルの能力を向上させる新しいトレーニング スキームです。
最後に、IntegratedPIFu は、PIFuHD よりも使用するモデル パラメーターが少ないにもかかわらず、再構築されたメッシュの構造の正確性を向上させることができる新しいアーキテクチャを提供します。
私たちの結果は、IntegratedPIFu が単一視点の人体再構成において既存の最先端の手法を大幅に上回ることを示しています。
私たちのコードはオンラインで利用できるようになりました。

要約(オリジナル)

We propose IntegratedPIFu, a new pixel aligned implicit model that builds on the foundation set by PIFuHD. IntegratedPIFu shows how depth and human parsing information can be predicted and capitalised upon in a pixel-aligned implicit model. In addition, IntegratedPIFu introduces depth oriented sampling, a novel training scheme that improve any pixel aligned implicit model ability to reconstruct important human features without noisy artefacts. Lastly, IntegratedPIFu presents a new architecture that, despite using less model parameters than PIFuHD, is able to improves the structural correctness of reconstructed meshes. Our results show that IntegratedPIFu significantly outperforms existing state of the arts methods on single view human reconstruction. Our code has been made available online.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google