E-VLC: A Real-World Dataset for Event-based Visible Light Communication And Localization

要約

変調されたLEDを使用した光学通信（たとえば、可視光通信など）は、高空間分解能のおかげで、イベントカメラの新たなアプリケーションです。
イベントカメラは、LED信号をデコードし、LEDマーカーの位置に対するカメラをローカライズするために単純に使用できます。
ただし、さまざまな実際の設定でのデコードとローカリゼーションをベンチマークするパブリックデータセットはありません。
私たちの知る限り、イベントカメラ、フレームカメラ、およびハードウェアトリガーと正確に同期した地上の真実のポーズで構成される最初のパブリックデータセットを提示します。
屋内と屋外の両方のさまざまなシーンの明るさの設定において、さまざまな敏感さを備えたさまざまなカメラの動きを提供します。
さらに、モーション推定と補償のためにコントラスト最大化フレームワークを活用する新しいローカリゼーション方法を提案します。
詳細な分析と実験結果は、Framesを使用した従来のARマーカーベースのイベントを介したイベントを伴うLEDベースのローカリゼーションの利点と、局在化における提案された方法の有効性を示しています。
提案されたデータセットが、モーション関連の古典的なコンピュータービジョンタスクとLEDマーカーデコードタスクの両方の将来のベンチマークとして機能し、モバイルデバイス上のイベントカメラのアプリケーションの拡大への道を開くことを願っています。
https://woven-visionai.github.io/evlc-dataset

要約(オリジナル)

Optical communication using modulated LEDs (e.g., visible light communication) is an emerging application for event cameras, thanks to their high spatio-temporal resolutions. Event cameras can be used simply to decode the LED signals and also to localize the camera relative to the LED marker positions. However, there is no public dataset to benchmark the decoding and localization in various real-world settings. We present, to the best of our knowledge, the first public dataset that consists of an event camera, a frame camera, and ground-truth poses that are precisely synchronized with hardware triggers. It provides various camera motions with various sensitivities in different scene brightness settings, both indoor and outdoor. Furthermore, we propose a novel method of localization that leverages the Contrast Maximization framework for motion estimation and compensation. The detailed analysis and experimental results demonstrate the advantages of LED-based localization with events over the conventional AR-marker–based one with frames, as well as the efficacy of the proposed method in localization. We hope that the proposed dataset serves as a future benchmark for both motion-related classical computer vision tasks and LED marker decoding tasks simultaneously, paving the way to broadening applications of event cameras on mobile devices. https://woven-visionai.github.io/evlc-dataset

arxiv情報

提供元, 利用サービス

arxiv.jp, Google