Project Aria: A New Tool for Egocentric Multi-Modal AI Research

要約

将来の拡張現実 (AR) デバイスで利用できる自己中心的なマルチモーダル データは、機械の認識に独特の課題と機会をもたらします。
これらの将来のデバイスは、常に利用可能でコンテキストを認識し、パーソナライズされた AI アプリケーションをサポートするために、社会的に受け入れられるフォームファクターで終日着用可能である必要があります。
Meta Reality Labs Research の私たちのチームは、この分野の研究を促進し加速することを目的として、自己中心的なマルチモーダル データ記録およびストリーミング デバイスである Aria デバイスを構築しました。
このペーパーでは、センサー構成を含む Aria デバイスのハードウェアと、そのようなデータの記録と処理を可能にする対応するソフトウェア ツールについて説明します。

要約(オリジナル)

Egocentric, multi-modal data as available on future augmented reality (AR) devices provides unique challenges and opportunities for machine perception. These future devices will need to be all-day wearable in a socially acceptable form-factor to support always available, context-aware and personalized AI applications. Our team at Meta Reality Labs Research built the Aria device, an egocentric, multi-modal data recording and streaming device with the goal to foster and accelerate research in this area. In this paper, we describe the Aria device hardware including its sensor configuration and the corresponding software tools that enable recording and processing of such data.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google