Voice control interface for surgical robot assistants

要約

ロボット支援による低侵襲手術のための従来の制御インターフェースは、外科医に重大な認知的負荷を与えます。
手術の効率、外科医とロボットのコラボレーション機能を向上させ、外科医の負担を軽減するために、当社は手術ロボットアシスタント用の新しい音声制御インターフェースを提供します。
当社のシステムは、最先端の音声認識である Whisper を ROS フレームワーク内に統合し、外科用マニピュレータ制御用の音声コマンドのリアルタイム解釈と実行を可能にします。
提案システムは音声認識モジュール、アクションマッピングモジュール、ロボット制御モジュールから構成される。
実験結果は、システムの高精度と推論速度を実証し、組織三角測量タスクにおける外科用途への実現可能性を実証しています。
今後の研究は、その堅牢性と臨床応用性をさらに向上させることに焦点を当てます。

要約(オリジナル)

Traditional control interfaces for robotic-assisted minimally invasive surgery impose a significant cognitive load on surgeons. To improve surgical efficiency, surgeon-robot collaboration capabilities, and reduce surgeon burden, we present a novel voice control interface for surgical robotic assistants. Our system integrates Whisper, state-of-the-art speech recognition, within the ROS framework to enable real-time interpretation and execution of voice commands for surgical manipulator control. The proposed system consists of a speech recognition module, an action mapping module, and a robot control module. Experimental results demonstrate the system’s high accuracy and inference speed, and demonstrates its feasibility for surgical applications in a tissue triangulation task. Future work will focus on further improving its robustness and clinical applicability.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google