MeshSplats: Mesh-Based Rendering with Gaussian Splatting Initialization

要約

Gaussian Splatting（GS）は、3Dコンピューターグラフィックスの最近の極めて重要な手法です。
GSベースのアルゴリズムは、ほとんどの場合、Ray Tracingなどの古典的な方法をバイパスします。これは、レンダリングに多くの固有の利点を提供します。
たとえば、Ray Tracingは、影や反射などの高度な照明効果のために、一貫性のない光線を処理できます。
この制限に対処するために、GSをメッシュのような形式に変換するメソッドであるMeshsplatを紹介します。
トレーニングの完了後、Meshsplatはガウス要素をメッシュ面に変換し、関連するすべての利点を備えたレイトレース方法を使用してレンダリングを可能にします。
私たちのモデルは、変換の直後に利用することができ、追加のトレーニングなしで品質がわずかに低下したメッシュをもたらします。
さらに、ガウスコンポーネントではなくメッシュ面で動作する専用の最適化アルゴリズムを適用することにより、再構築品質を向上させることができます。
この方法の有効性は、実験結果によって実証されており、コンピューターグラフィックスと画像処理における広範なアプリケーションを強調しています。

要約(オリジナル)

Gaussian Splatting (GS) is a recent and pivotal technique in 3D computer graphics. GS-based algorithms almost always bypass classical methods such as ray tracing, which offers numerous inherent advantages for rendering. For example, ray tracing is able to handle incoherent rays for advanced lighting effects, including shadows and reflections. To address this limitation, we introduce MeshSplats, a method which converts GS to a mesh-like format. Following the completion of training, MeshSplats transforms Gaussian elements into mesh faces, enabling rendering using ray tracing methods with all their associated benefits. Our model can be utilized immediately following transformation, yielding a mesh of slightly reduced quality without additional training. Furthermore, we can enhance the reconstruction quality through the application of a dedicated optimization algorithm that operates on mesh faces rather than Gaussian components. The efficacy of our method is substantiated by experimental results, underscoring its extensive applications in computer graphics and image processing.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google