Safe Multimodal Communication in Human-Robot Collaboration

要約

新しい産業環境の特徴は、人間とロボットが近接して作業し、協力して必要な仕事を遂行することです。
ただし、このようなコラボレーションには多くの側面に注意を払う必要があります。
まず、この 2 つのアクター間の自然かつ効率的なコミュニケーションを可能にすることが重要です。
次に、ロボットの動作は常に安全規制に準拠し、常に安全なコラボレーションを確保する必要があります。
この論文では、常に安全規制を尊重しながら、音声とジェスチャーコマンドのマルチモーダル融合を活用することで、人間とロボット間のマルチチャネルコミュニケーションを可能にするフレームワークを提案します。
このフレームワークは比較実験を通じて検証され、マルチモーダル通信のおかげで、ロボットが必要なタスクを実行するための貴重な情報を抽出できること、さらに安全レイヤーを使用してロボットが速度を調整してオペレーターの安全を確保できることが実証されました。

要約(オリジナル)

The new industrial settings are characterized by the presence of human and robots that work in close proximity, cooperating in performing the required job. Such a collaboration, however, requires to pay attention to many aspects. Firstly, it is crucial to enable a communication between this two actors that is natural and efficient. Secondly, the robot behavior must always be compliant with the safety regulations, ensuring always a safe collaboration. In this paper, we propose a framework that enables multi-channel communication between humans and robots by leveraging multimodal fusion of voice and gesture commands while always respecting safety regulations. The framework is validated through a comparative experiment, demonstrating that, thanks to multimodal communication, the robot can extract valuable information for performing the required task and additionally, with the safety layer, the robot can scale its speed to ensure the operator’s safety.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google