VitalLens: Take A Vital Selfie

要約

本レポートでは、自撮り動画から心拍数や呼吸数などのバイタルサインをリアルタイムに推定するアプリ「VitalLens」を紹介します。
VitalLens は、ビデオおよび生理学的センサー データの多様なデータセットでトレーニングされたコンピューター ビジョン モデルを使用します。
289 人の固有の参加者で構成される VV-Medium を含む、いくつかの多様なデータセットでパフォーマンスのベンチマークを行います。
VitalLens は、高速な推論速度を維持しながら、すべてのデータセットで POS や MTTS-CAN などのいくつかの既存の方法を上回ります。
VV-Medium では、VitalLens は心拍数推定で 0.71 bpm、呼吸数推定で 0.76 bpm の平均絶対誤差を達成します。

要約(オリジナル)

This report introduces VitalLens, an app that estimates vital signs such as heart rate and respiration rate from selfie video in real time. VitalLens uses a computer vision model trained on a diverse dataset of video and physiological sensor data. We benchmark performance on several diverse datasets, including VV-Medium, which consists of 289 unique participants. VitalLens outperforms several existing methods including POS and MTTS-CAN on all datasets while maintaining a fast inference speed. On VV-Medium, VitalLens achieves mean absolute errors of 0.71 bpm for heart rate estimation, and 0.76 bpm for respiratory rate estimation.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google