PhysAnimator: Physics-Guided Generative Cartoon Animation

要約

手描きのアニメーションシーケンスを作成することは労働集約的であり、専門的な専門知識を要求します。
Physanimatorを紹介します。これは、静的なアニメイラストから物理的にもっともらしいアニメsty化されたアニメーションを生成するための新しいアプローチです。
この方法では、物理ベースのシミュレーションをデータ駆動型の生成モデルとシームレスに統合して、動的で視覚的に魅力的なアニメーションを生成します。
アニメの流動性と誇張特性をキャプチャするために、抽出されたメッシュジオメトリで画像空間変形可能な身体シミュレーションを実行します。
カスタマイズ可能なエネルギーストロークを導入し、リギングポイントサポートを組み込んで、風の相互作用などのテーラードアニメーション効果を作成できるようにすることにより、芸術的制御を強化します。
最後に、シミュレーションシーケンスからスケッチを抽出してワープし、テクスチャに依存しない表現を生成し、高品質のアニメーションフレームを合成するためにスケッチガイドのビデオ拡散モデルを採用します。
結果として生じるアニメーションは、時間的な一貫性と視覚的妥当性を示し、ダイナミックアニメスタイルのアニメーションを作成する際の方法の有効性を示しています。
詳細については、プロジェクトページをご覧ください：https：//xpandora.github.io/physanimator/

要約(オリジナル)

Creating hand-drawn animation sequences is labor-intensive and demands professional expertise. We introduce PhysAnimator, a novel approach for generating physically plausible meanwhile anime-stylized animation from static anime illustrations. Our method seamlessly integrates physics-based simulations with data-driven generative models to produce dynamic and visually compelling animations. To capture the fluidity and exaggeration characteristic of anime, we perform image-space deformable body simulations on extracted mesh geometries. We enhance artistic control by introducing customizable energy strokes and incorporating rigging point support, enabling the creation of tailored animation effects such as wind interactions. Finally, we extract and warp sketches from the simulation sequence, generating a texture-agnostic representation, and employ a sketch-guided video diffusion model to synthesize high-quality animation frames. The resulting animations exhibit temporal consistency and visual plausibility, demonstrating the effectiveness of our method in creating dynamic anime-style animations. See our project page for more demos: https://xpandora.github.io/PhysAnimator/

arxiv情報

提供元, 利用サービス

arxiv.jp, Google