TEyeD: Over 20 million real-world eye images with Pupil, Eyelid, and Iris 2D and 3D Segmentations, 2D and 3D Landmarks, 3D Eyeball, Gaze Vector, and Eye Movement Types

要約

ヘッドマウント デバイスで撮影された目の画像の世界最大の統合公開データ セットである TEyeD を紹介します。
TEyeD は、7 つの異なるヘッド マウント アイ トラッカーで取得されました。
その中で、2 つのアイ トラッカーが仮想現実 (VR) または拡張現実 (AR) デバイスに統合されました。
TEyeD の画像は、車の乗り物、シミュレーターの乗り物、屋外スポーツ活動、日常の屋内活動など、さまざまなタスクから取得されました。
このデータ セットには、2D\&3D ランドマーク、セマンティック セグメンテーション、3D 眼球注釈、およびすべての画像の視線ベクトルと眼球運動タイプが含まれています。
瞳孔、虹彩、まぶたのランドマークとセマンティック セグメンテーションが提供されます。
ビデオの長さは、数分から数時間までさまざまです。
TEyeD は、2,000 万を超える慎重に注釈が付けられた画像を使用して、最新の VR および AR アプリケーションにおけるコンピューター ビジョン、アイ トラッキング、視線推定の分野で研究を進めるための独自の一貫したリソースと貴重な基盤を提供します。
データとコードは、FTP 経由でユーザー TEyeDUser として、パスワードなしで nephrit.cs.uni-tuebingen.de (ftp://TEyeDUser@nephrit.cs.uni-tuebingen.de) に接続するだけです。

要約(オリジナル)

We present TEyeD, the world’s largest unified public data set of eye images taken with head-mounted devices. TEyeD was acquired with seven different head-mounted eye trackers. Among them, two eye trackers were integrated into virtual reality (VR) or augmented reality (AR) devices. The images in TEyeD were obtained from various tasks, including car rides, simulator rides, outdoor sports activities, and daily indoor activities. The data set includes 2D\&3D landmarks, semantic segmentation, 3D eyeball annotation and the gaze vector and eye movement types for all images. Landmarks and semantic segmentation are provided for the pupil, iris and eyelids. Video lengths vary from a few minutes to several hours. With more than 20 million carefully annotated images, TEyeD provides a unique, coherent resource and a valuable foundation for advancing research in the field of computer vision, eye tracking and gaze estimation in modern VR and AR applications. Data and code at Just connect via FTP as user TEyeDUser and without password to nephrit.cs.uni-tuebingen.de (ftp://TEyeDUser@nephrit.cs.uni-tuebingen.de).

arxiv情報

提供元, 利用サービス

arxiv.jp, Google