Enhancing Portuguese Sign Language Animation with Dynamic Timing and Mouthing

要約

現在の署名アバターは、人間の署名者の同期した身体動作の微妙な部分をすべて正確に再現できないため、不自然であるとよく言われます。
この論文では、ポルトガル手話の口のアニメーションに焦点を当て、手話間の遷移に対する新しい動的アプローチを提案します。
ネイティブの署名者は動的なトランジションを備えたアニメーションを好みましたが、理解力と知覚される自然さのスコアに大きな違いは見つかりませんでした。
一方で、口を動かす動作を含めることで、初心者の手話学習者の理解力と自然さの認識が向上することを示しました。
結果は、計算言語学、人間とコンピューターの相互作用、および署名するアバターの合成アニメーションに影響を及ぼします。

要約(オリジナル)

Current signing avatars are often described as unnatural as they cannot accurately reproduce all the subtleties of synchronized body behaviors of a human signer. In this paper, we propose a new dynamic approach for transitions between signs, focusing on mouthing animations for Portuguese Sign Language. Although native signers preferred animations with dynamic transitions, we did not find significant differences in comprehension and perceived naturalness scores. On the other hand, we show that including mouthing behaviors improved comprehension and perceived naturalness for novice sign language learners. Results have implications in computational linguistics, human-computer interaction, and synthetic animation of signing avatars.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google