NeuGaze: Reshaping the future BCI

要約

費用のかかる脳波または侵襲的インプラントに依存している従来の脳コンピューターインターフェイス（BCIS）は、セットアップの複雑さと限られた精度により、複雑なヒューマンコンピューター相互作用と闘っています。
目の視線、頭の動き、表情を活用する新しいウェブカメラベースのシステムであるNeugazeを提示し、ラップトップでプリインストールされることが多い標準の30 Hzウェブカメラのみを使用して直感的でリアルタイムのコントロールを可能にします。
最小限のキャリブレーションを必要とするNeugazeは、従来の入力に匹敵するパフォーマンスを実現し、正確なカーソルナビゲーションをサポートし、効率的なスキルホイールを介したキートリガー、ファーストパーソンゲームでの恐ろしい対戦相手を倒すなどのダイナミックなゲームインタラクションを実現します。
Neugazeは、運動障害のある個人の保存されたネックアップ機能を活用することにより、特殊なハードウェアの必要性を排除し、BCISの低コストでアクセス可能な代替品を提供します。
このパラダイムは、支援技術からエンターテイメントまで、運動障害のあるユーザー向けのヒューマンコンピューターの相互作用を再定義し、多様なアプリケーションを強化します。
プロジェクトは\ href {https://github.com/neuspeech/neugaze} {github.com/neuspeech/neugaze}です。

要約(オリジナル)

Traditional brain-computer interfaces (BCIs), reliant on costly electroencephalography or invasive implants, struggle with complex human-computer interactions due to setup complexity and limited precision. We present NeuGaze, a novel webcam-based system that leverages eye gaze, head movements, and facial expressions to enable intuitive, real-time control using only a standard 30 Hz webcam, often pre-installed in laptops. Requiring minimal calibration, NeuGaze achieves performance comparable to conventional inputs, supporting precise cursor navigation, key triggering via an efficient skill wheel, and dynamic gaming interactions, such as defeating formidable opponents in first-person games. By harnessing preserved neck-up functionalities in motor-impaired individuals, NeuGaze eliminates the need for specialized hardware, offering a low-cost, accessible alternative to BCIs. This paradigm empowers diverse applications, from assistive technology to entertainment, redefining human-computer interaction for motor-impaired users. Project is at \href{https://github.com/NeuSpeech/NeuGaze}{github.com/NeuSpeech/NeuGaze}.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google