Fast Sprite Decomposition from Animated Graphics

要約

このペーパーでは、アニメーション グラフィックを基本要素またはレイヤーのセットであるスプライトに分解するアプローチを紹介します。
私たちのアプローチは、ラスター ビデオに合わせてスプライト パラメーターを最適化することに基づいています。
効率性を高めるため、スプライトには静的テクスチャを想定し、テクスチャ事前モデルを使用してアーティファクトを防止しながら検索スペースを削減します。
最適化をさらに高速化するために、事前トレーニングされたビデオ オブジェクト セグメンテーション モデルと単一フレーム アノテーションのユーザー入力を利用したスプライト パラメーターの初期化を導入します。
私たちの研究では、オンライン デザイン サービスから Crello アニメーション データセットを構築し、抽出されたスプライトの品質を測定するための定量的メトリクスを定義します。
実験によれば、私たちの方法は、品質と効率のトレードオフの点で、同様の分解タスクのベースラインを大幅に上回っています。

要約(オリジナル)

This paper presents an approach to decomposing animated graphics into sprites, a set of basic elements or layers. Our approach builds on the optimization of sprite parameters to fit the raster video. For efficiency, we assume static textures for sprites to reduce the search space while preventing artifacts using a texture prior model. To further speed up the optimization, we introduce the initialization of the sprite parameters utilizing a pre-trained video object segmentation model and user input of single frame annotations. For our study, we construct the Crello Animation dataset from an online design service and define quantitative metrics to measure the quality of the extracted sprites. Experiments show that our method significantly outperforms baselines for similar decomposition tasks in terms of the quality/efficiency tradeoff.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google