要約
キーポイント検出は、多くのコンピューター ビジョンおよびロボット工学アプリケーションの基礎として機能します。
色付きの点群は容易に取得できるという事実にも関わらず、既存のキーポイント検出器のほとんどはジオメトリの顕著なキーポイントのみを抽出するため、色情報を活用しようとしている (またはその可能性がある) システムの全体的なパフォーマンスが妨げられる可能性があります。
このようなシステムの進歩を促進するために、色付き点群内の幾何学的顕著なキーポイントと色顕著なキーポイントの両方を抽出できる効率的なマルチモーダル キーポイント検出器を提案します。
提案された CEntroid Distance (CED) キーポイント検出器は、3D 空間と色空間の両方で使用できる直感的で効果的な顕著性測定である重心距離と、顕著性の高いキーポイントを選択できるマルチモーダル非最大抑制アルゴリズムで構成されています。
2つ以上のモダリティで。
提案された顕著性測定は、局所近傍内の点の分布を直接利用し、正規推定や固有値分解を必要としません。
合成データセットと現実世界のデータセットの両方で、最先端のキーポイント検出器と比較して、再現性と計算効率 (つまり、実行時間) の観点から、提案された方法を評価します。
結果は、私たちが提案した CED キーポイント検出器が、高い再現性を達成しながら最小限の計算時間を必要とすることを示しています。
提案された方法の潜在的なアプリケーションの 1 つを紹介するために、色付き点群の登録タスクをさらに調査します。
結果は、私たちが提案した CED 検出器が、評価されたシーンで手作りの学習ベースの最先端のキーポイント検出器よりも優れていることを示唆しています。
提案されたメソッドの C++ 実装は、https://github.com/UCR-Robotics/CED_Detector で公開されています。
要約(オリジナル)
Keypoint detection serves as the basis for many computer vision and robotics applications. Despite the fact that colored point clouds can be readily obtained, most existing keypoint detectors extract only geometry-salient keypoints, which can impede the overall performance of systems that intend to (or have the potential to) leverage color information. To promote advances in such systems, we propose an efficient multi-modal keypoint detector that can extract both geometry-salient and color-salient keypoints in colored point clouds. The proposed CEntroid Distance (CED) keypoint detector comprises an intuitive and effective saliency measure, the centroid distance, that can be used in both 3D space and color space, and a multi-modal non-maximum suppression algorithm that can select keypoints with high saliency in two or more modalities. The proposed saliency measure leverages directly the distribution of points in a local neighborhood and does not require normal estimation or eigenvalue decomposition. We evaluate the proposed method in terms of repeatability and computational efficiency (i.e. running time) against state-of-the-art keypoint detectors on both synthetic and real-world datasets. Results demonstrate that our proposed CED keypoint detector requires minimal computational time while attaining high repeatability. To showcase one of the potential applications of the proposed method, we further investigate the task of colored point cloud registration. Results suggest that our proposed CED detector outperforms state-of-the-art handcrafted and learning-based keypoint detectors in the evaluated scenes. The C++ implementation of the proposed method is made publicly available at https://github.com/UCR-Robotics/CED_Detector.
arxiv情報
著者 | Hanzhe Teng,Dimitrios Chatziparaschis,Xinyue Kan,Amit K. Roy-Chowdhury,Konstantinos Karydis |
発行日 | 2023-06-15 04:43:24+00:00 |
arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google