Training Methods of Multi-label Prediction Classifiers for Hyperspectral Remote Sensing Images

要約

スペクトル深度と幾何学的解像度を組み合わせたハイパースペクトル リモート センシング画像には、従来のコンピューター ビジョン技術に挑戦する複雑で非線形の豊富な情報が埋め込まれています。
しかし、表現学習機能で知られる深層学習手法は、そのような複雑さを処理するのにより適していることが証明されています。
ハイパースペクトル リモート センシング画像の単一ラベルのピクセル レベルの分類方法に焦点を当てたアプリケーションとは異なり、2 成分の深層学習ネットワークに基づくマルチラベルのパッチ レベルの分類方法を提案します。
縮小された空間次元のパッチと、リモート センシング画像から抽出された完全なスペクトル深度を使用します。
さらに、ネットワークの 3 つのトレーニング スキーム、反復、ジョイント、およびカスケードを調査します。
実験では、Joint スキームが最もパフォーマンスの高いスキームであることが示唆されています。
ただし、その適用には、損失構成要素の最適な重みの組み合わせを見つけるための高価な検索が必要です。
反復スキームにより、トレーニングの初期段階でネットワークの 2 つの部分間で機能を共有できます。
マルチラベルを使用した複雑なデータでは、パフォーマンスが向上します。
さらなる実験では、さまざまなアーキテクチャで設計された方法が、サンプリング方法に従って抽出およびラベル付けされたパッチでトレーニングすると、うまく機能することが示されました。

要約(オリジナル)

With their combined spectral depth and geometric resolution, hyperspectral remote sensing images embed a wealth of complex, non-linear information that challenges traditional computer vision techniques. Yet, deep learning methods known for their representation learning capabilities prove more suitable for handling such complexities. Unlike applications that focus on single-label, pixel-level classification methods for hyperspectral remote sensing images, we propose a multi-label, patch-level classification method based on a two-component deep-learning network. We use patches of reduced spatial dimension and a complete spectral depth extracted from the remote sensing images. Additionally, we investigate three training schemes for our network: Iterative, Joint, and Cascade. Experiments suggest that the Joint scheme is the best-performing scheme; however, its application requires an expensive search for the best weight combination of the loss constituents. The Iterative scheme enables the sharing of features between the two parts of the network at the early stages of training. It performs better on complex data with multi-labels. Further experiments showed that methods designed with different architectures performed well when trained on patches extracted and labeled according to our sampling method.

arxiv情報

著者 Salma Haidar,José Oramas
発行日 2023-01-17 13:30:03+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.CV パーマリンク