Stable-SCore: A Stable Registration-based Framework for 3D Shape Correspondence

要約

キャラクターの形状の対応を確立することは、コンピュータービジョンとグラフィックスにおける重要かつ基本的なタスクであり、再同では、再同では、属性転送、形状補間などの多様なアプリケーションがあります。
現在の支配的な機能マップ法は、制御されたシナリオでは効果的ですが、非誤った形状の矛盾などのより複雑な課題を伴う実際の状況での闘争です。
これに応じて、登録への登録方法を再検討し、より安定した形状の対応推定の可能性をタップします。
不安定な変形や、慎重な事前整列または高品質の初期3D対応の必要性など、それらの一般的な問題を克服するために、安定したスコア：3D形状の対応のための安定した登録ベースのフレームワークを紹介します。
最初に、信頼性が高く安定した2Dマッピングを保証する2D文字対応の基礎モデルを再利用します。
重要なことに、メッシュの変形をガイドするために2D対応を活用する新しいセマンティックフローガイド付き登録アプローチを提案します。
私たちのフレームワークは、挑戦的なシナリオで既存の方法を大幅に上回り、結果に示されているように、幅広い実際のアプリケーションの可能性をもたらします。

要約(オリジナル)

Establishing character shape correspondence is a critical and fundamental task in computer vision and graphics, with diverse applications including re-topology, attribute transfer, and shape interpolation. Current dominant functional map methods, while effective in controlled scenarios, struggle in real situations with more complex challenges such as non-isometric shape discrepancies. In response, we revisit registration-for-correspondence methods and tap their potential for more stable shape correspondence estimation. To overcome their common issues including unstable deformations and the necessity for careful pre-alignment or high-quality initial 3D correspondences, we introduce Stable-SCore: A Stable Registration-based Framework for 3D Shape Correspondence. We first re-purpose a foundation model for 2D character correspondence that ensures reliable and stable 2D mappings. Crucially, we propose a novel Semantic Flow Guided Registration approach that leverages 2D correspondence to guide mesh deformations. Our framework significantly surpasses existing methods in challenging scenarios, and brings possibilities for a wide array of real applications, as demonstrated in our results.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google