Real-Time Gesture Recognition with Virtual Glove Markers

要約

人間同士の効果的なコミュニケーションを可能にする普遍的な非言語的自然コミュニケーションの手法のため、ジェスチャー認識技術は過去数十年にわたり着実に発展してきました。ジェスチャー認識に基づく研究論文では、物理センサーとコンピュータービジョンの両方を用いて、非言語的な自然なコミュニケーション情報をコンピューターに送る効果的なシステムを作ろうと、さまざまな戦略が発表されています。一方、超高精度リアルタイムシステムは、ユーザビリティ、コスト、スピード、精度などの過去の限界から、それぞれが様々な方法論を採用し、最近になってようやく研究分野を占め始めたところである。ジェスチャー認識アプリケーションのために、自然なユーザーインターフェースとして機能する、コンピュータビジョンに基づくリアルタイムヒューマンコンピュータインタラクションツールを提案する。ユーザーの手に仮想のグローブマーカーを作成し、ジェスチャーのリアルタイム認識のための深層学習モデルへの入力として使用する予定である。得られた結果から、提案システムはテレプレゼンスによる社会的相互作用やリハビリテーションを含むリアルタイムアプリケーションに有効であることが示された。

要約(オリジナル)

Due to the universal non-verbal natural communication approach that allows for effective communication between humans, gesture recognition technology has been steadily developing over the previous few decades. Many different strategies have been presented in research articles based on gesture recognition to try to create an effective system to send non-verbal natural communication information to computers, using both physical sensors and computer vision. Hyper accurate real-time systems, on the other hand, have only recently began to occupy the study field, with each adopting a range of methodologies due to past limits such as usability, cost, speed, and accuracy. A real-time computer vision-based human-computer interaction tool for gesture recognition applications that acts as a natural user interface is proposed. Virtual glove markers on users hands will be created and used as input to a deep learning model for the real-time recognition of gestures. The results obtained show that the proposed system would be effective in real-time applications including social interaction through telepresence and rehabilitation.

arxiv情報

提供元, 利用サービス

arxiv.jp, DeepL