要約
協調的知覚は、最近、単一エージェントの知覚よりも知覚能力を向上させる大きな可能性を示しています。
既存の協調的知覚方法は通常、理想的なコミュニケーション環境を考慮しています。
ただし、実際には、通信システムは必然的に遅延の問題に悩まされ、自動運転などのセーフティクリティカルなアプリケーションで潜在的なパフォーマンスの低下と高いリスクを引き起こします。
機械学習の観点から、避けられないレイテンシーによって引き起こされる影響を軽減するために、複数のエージェントからの非同期知覚機能を同じタイムスタンプにアクティブに適応させ、コラボレーションの堅牢性と有効性を促進する、最初のレイテンシー対応のコラボレーション知覚システムを紹介します。
このような機能レベルの同期を実現するために、機能注意の共生推定と時間変調技術を活用するSyncNetと呼ばれる新しい遅延補償モジュールを提案します。
実験結果は、SyncNetを備えた提案された遅延認識協調知覚システムが、通信待ち時間シナリオで最先端の協調知覚方法を15.6%上回り、厳しい待ち時間の下で単一エージェント知覚よりも優れた協調知覚を維持できることを示しています。
要約(オリジナル)
Collaborative perception has recently shown great potential to improve perception capabilities over single-agent perception. Existing collaborative perception methods usually consider an ideal communication environment. However, in practice, the communication system inevitably suffers from latency issues, causing potential performance degradation and high risks in safety-critical applications, such as autonomous driving. To mitigate the effect caused by the inevitable latency, from a machine learning perspective, we present the first latency-aware collaborative perception system, which actively adapts asynchronous perceptual features from multiple agents to the same time stamp, promoting the robustness and effectiveness of collaboration. To achieve such a feature-level synchronization, we propose a novel latency compensation module, called SyncNet, which leverages feature-attention symbiotic estimation and time modulation techniques. Experiments results show that the proposed latency aware collaborative perception system with SyncNet can outperforms the state-of-the-art collaborative perception method by 15.6% in the communication latency scenario and keep collaborative perception being superior to single agent perception under severe latency.
arxiv情報
著者 | Zixing Lei,Shunli Ren,Yue Hu,Wenjun Zhang,Siheng Chen |
発行日 | 2022-07-25 13:29:09+00:00 |
arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google