SideSeeing: A multimodal dataset and collection of tools for sidewalk assessment

要約

このペーパーでは、構築された環境を評価するためのツールとデータセットを提供する新しい取り組みである SideSeeing を紹介します。
ストリートレベルのデータの取得、読み込み、分析のためのフレームワークを紹介します。
このフレームワークを使用して、胸に装着したモバイル デバイスからキャプチャされた同期ビデオ映像とセンサー データ (加速度計、ジャイロスコープ、磁力計、GPS) を統合する新しいデータセットを収集しました。
各データ サンプルは、ブラジルと米国の病院近くの歩道を撮影しているユーザーが通過した経路を表しています。
このデータセットには、9 つ​​の病院の周囲 12 キロメートルをカバーする 3 時間のコンテンツが含まれており、対応するセンサー データを含む 325,000 のビデオ フレームが含まれています。
さらに、歩道シーンの識別のために特別に作成された新しい 68 要素の分類法を紹介します。
SideSeeing は、都市の専門家が歩道のアクセシビリティを詳細に評価するために使用できる一連のツールへの一歩です。
SideSeeing のデータとツールは、https://sites.usp.br/sideseeing/ で公開されています。

要約(オリジナル)

This paper introduces SideSeeing, a novel initiative that provides tools and datasets for assessing the built environment. We present a framework for street-level data acquisition, loading, and analysis. Using the framework, we collected a novel dataset that integrates synchronized video footaged captured from chest-mounted mobile devices with sensor data (accelerometer, gyroscope, magnetometer, and GPS). Each data sample represents a path traversed by a user filming sidewalks near hospitals in Brazil and the USA. The dataset encompasses three hours of content covering 12 kilometers around nine hospitals, and includes 325,000 video frames with corresponding sensor data. Additionally, we present a novel 68-element taxonomy specifically created for sidewalk scene identification. SideSeeing is a step towards a suite of tools that urban experts can use to perform in-depth sidewalk accessibility evaluations. SideSeeing data and tools are publicly available at https://sites.usp.br/sideseeing/.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google