Multi-style Neural Radiance Field with AdaIN

要約

この研究では、様式化されたノベル ビュー合成のタスクのために AdaIN と NeRF を組み合わせた新しいパイプラインを提案します。
以前の作業と比較して、次の点に貢献します。 1) パイプラインを簡素化します。
2) モデルの機能を拡張して、マルチスタイルのタスクを処理します。
3) 強いブラシ ストロークを持つスタイルで適切に動作するようにモデル アーキテクチャを変更します。
4) マルチスタイル モデルにスタイル補間を実装することで、任意の 2 つのスタイル間のスタイルと、スタイル化された出力と元のシーン間のスタイルの強度を制御できるようになり、スタイル化の強度をより適切に制御できるようになります。

要約(オリジナル)

In this work, we propose a novel pipeline that combines AdaIN and NeRF for the task of stylized Novel View Synthesis. Compared to previous works, we make the following contributions: 1) We simplify the pipeline. 2) We extend the capabilities of model to handle the multi-style task. 3) We modify the model architecture to perform well on styles with strong brush strokes. 4) We implement style interpolation on the multi-style model, allowing us to control the style between any two styles and the style intensity between the stylized output and the original scene, providing better control over the stylization strength.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google