Restormer-Plus for Real World Image Deraining: One State-of-the-Art Solution to the GT-RAIN Challenge (CVPR 2023 UG$^2$+ Track 3)

要約

タイトル: GT-RAINチャレンジ（CVPR 2023 UG2+トラック3）の実世界画像のデレイニングに対するRestormer-Plus：最新のソリューションの1つ

要約:
– この報告書は、GT-RAINチャレンジ（CVPR 2023 UG2+トラック3）に提出されたRestormer-Plusアプローチを紹介しています。
– チャレンジの詳細については、http://cvpr2023.ug2challenge.org/track3.htmlをご覧ください。
– Restormer-Plusは、ピーク信号対雑音比（PSNR）の面で、他のすべての提出された解決策を上回っていることが示されています。
– Restormer-Plusは、主に4つのモジュールで構成されています。単一の画像デレイニングモジュール、中央値フィルタリングモジュール、重み付き平均化モジュール、そして後処理モジュールです。
– 単一画像デレイニングモジュールは、Restormer上に構築され、各雨の画像で行われるRestormer-Xと命名されました。
– 中央値フィルタリングモジュールは、各シーンに関連する300の雨の画像に対して中央値演算子として使用されます。
– 重み付き平均化モジュールは、Restormer-Xのみを使用すると過学習を緩和するために中央値フィルタリングの結果とRestormer-Xを組み合わせます。
– 最後に、後処理モジュールが使用されて、明るさの回復を改善します。
– これらのモジュールを合わせることで、Restormer-PlusはGT-RAINチャレンジにおける最新のソリューションの一つとなります。
– Restormer-Plusのコードは、https://github.com/ZJLAB-AMMI/Restormer-Plusで利用可能です。

要約(オリジナル)

This technical report presents our Restormer-Plus approach, which was submitted to the GT-RAIN Challenge (CVPR 2023 UG$^2$+ Track 3). Details regarding the challenge are available at http://cvpr2023.ug2challenge.org/track3.html. Our Restormer-Plus outperformed all other submitted solutions in terms of peak signal-to-noise ratio (PSNR). It consists mainly of four modules: the single image de-raining module, the median filtering module, the weighted averaging module, and the post-processing module. We named the single-image de-raining module Restormer-X, which is built on Restormer and performed on each rainy image. The median filtering module is employed as a median operator for the 300 rainy images associated with each scene. The weighted averaging module combines the median filtering results with that of Restormer-X to alleviate overfitting if we only use Restormer-X. Finally, the post-processing module is used to improve the brightness restoration. Together, these modules render Restormer-Plus to be one state-of-the-art solution to the GT-RAIN Challenge. Our code is available at https://github.com/ZJLAB-AMMI/Restormer-Plus.

arxiv情報

提供元, 利用サービス

arxiv.jp, OpenAI